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内 容 简 介 


本 书 突出 实用 特色 ,讲述 软件 测试 的 相关 概念 ,方法 和 技能 ,全 书 分 为 基础 篇 技术 篇 和 工具 篇 三 大 部 
分 : 基础 篇 讲述 软件 测试 与 软件 质量 的 基础 理论 ,为 后 面 的 学 习 葛 定 一 定 的 理论 基础 ; 技术 篇 讲述 了 面向 
传统 开发 过 程 、 面 向 软件 工程 层面 的 软件 测试 和 自动 化 测试 以 及 敏捷 测试 ; 工具 篇 介绍 黑 盒 测 试 工具 与 白 
盒 测试 工具 ,性 能 测试 工具 与 安全 测试 工具 以 及 测试 管理 工具 ,并 选取 常用 软件 测试 工具 讲述 其 使 用 方法 。 

本 书 重视 实践 能 力 和 操作 能 力 的 培养 ,内 容 翔 实 \ 循 序 渐进 、 图 文 并 茂 、 实 用 性 强 ,并 在 案例 讲述 过 程 
中 穿插 相关 的 基础 知识 和 基本 理论 介绍 ,做 到 理论 与 实践 相 结合 ,方法 与 应 用 相 结 合 ,读者 可 在 较 短 的 时 
间 内 理解 和 掌握 软件 测试 的 基本 概念 和 操作 实务 。 

本 书 是 软件 测试 相关 课程 的 配套 教材 ,适用 于 企 事 业 等 单位 从 事 软件 测试 工作 的 人 员 参 考 学 习 , 也 可 
作为 大 中 专 院 校 计算 机 、 软 件 工程 、 测 试 等 相关 专业 师 生 自学 、 教 学 参考 书 以 及 社会 各 类 培训 班 的 即 学 即 
用 教材 ,也 适用 于 计算 机 技术 与 软件 专业 技术 资格 (水 平 ) 考 试 的 继续 教育 。 
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随 着 我 国 改革 开放 的 进一步 深化 ,高 等 教育 也 得 到 了 快速 发 展 ,各 地 高 校 紧密 结合 地 方 
经 济 建设 发 展 需 要 ,科学 运用 市 场 调节 机 制 ,加 大 了 使 用 信息 科学 等 现代 科学 技术 提升 、 改 
造 传 统 学 科 专 业 的 投入 力度 ,通过 教育 改革 合理 调整 和 配置 了 教育 资源 ,优化 了 传统 学 科 专 
业 ,积极 为 地 方 经 济 建设 输送 人 才 , 为 我 国 经 济 社会 的 快速 、 健 康 和 可 持续 发 展 以 及 高 等 教 
育 自身 的 改革 发 展 做 出 了 巨大 贡献 。 但 是 ,高 等 教育 质量 还 需要 进一步 提高 以 适应 经 济 社 
会 发 展 的 需要 ,不 少 高 校 的 专业 设置 和 结构 不 尽 合理 ,教师 队伍 整体 素质 或 待 提高 ,人 才 培 
养 模 式 .教学 内 容 和 方法 需要 进一步 转变 ,学 生 的 实践 能 力 和 创新 精神 蝇 待 加 强 。 

教育 部 一 直 十 分 重视 高 等 教育 质量 工作 。2007 年 1 月 ,教育 部 下 发 了 《关于 实施 高 等 
学 校本 科教 学 质量 与 教学 改革 工程 的 意见 》, 计 划 实 施 * 高 等 学 校本 科教 学 质量 与 教学 改革 
工程 (简称 “质量 工程 ')”, 通 过 专业 结构 调整 课程 教材 建设 实践 教学 改革 ,教学 团队 建设 
等 多 项 内 容 , 进 一 步 深 化 高 等 学 校 教 学 改革 ,提高 人 才 培 养 的 能 力 和 水 平 ,更 好 地 满足 经 济 
社会 发 展 对 高 素质 人 才 的 需要 。 在 贯彻 和 落实 教育 部 “质量 工程 "的 过 程 中 ,各 地 高 校 发 挥 
师资 力量 强 、 办 学 经 验 丰 富 、 教 学 资源 充裕 等 优势 ,对 其 特色 专业 及 特色 课程 ( 群 ) 加 以 规划 、 
整理 和 总 结 ,更 新 教学 内 容 、 改 革 课 程 体系 ,建设 了 一 大 批 内 容 新 、 体 系 新 、 方 法 新 、 手 段 新 的 
特色 课程 。 在 此 基础 上 ,经 教育 部 相关 教学 指导 委员 会 专家 的 指导 和 建议 ,清华 大 学 出 版 社 
在 多 个 领域 精 选 各 高 校 的 特色 课程 ,分 别 规划 出 版 系列 教材 ,以 配合 “质量 工程 ”的 实施 , 满 
足 各 高 校 教学 质量 和 教学 改革 的 需要 。 

为 了 深入 贯彻 落实 教育 部 (关于 加 强 高 等 学 校本 科教 学 工作 ,提高 教学 质量 的 若干 意 
见 ) 精 神 ,紧密 配合 教育 部 已 经 启动 的 “高 等 学 校 教学 质量 与 教学 改革 工程 精品 课程 建设 工 
作 ”, 在 有 关 专 家 、 教 授 的 倡议 和 有 关 部 门 的 大 力 支持 下 ,我 们 组 织 并 成 立 了 “清华 大 学 出 版 
社 教材 编审 委员 会 "(以 下 简称 “ 编 委 会 ”) , 旨 在 配合 教育 部 制定 精品 课程 教材 的 出 版 规划 ， 
讨论 并 实施 精品 课程 教材 的 编写 与 出 版 工作 。“ 编 委 会 "成员 皆 来 自 全 国 各 类 高 等 学 校 教学 
与 科研 第 一 线 的 骨干 教师 ,其 中 许多 教师 为 各 校 相关 院 、 系 主管 教学 的 院 长 或 系 主任 。 

按照 教育 部 的 要 求 ,“ 编 委 会 "一致 认为 ,精品 课程 的 建设 工作 从 开始 就 要 坚持 高 标准 、 
严 要 求 , 处 于 一 个 比较 高 的 起 点 上 ; 精品 课程 教材 应 该 能 够 反映 各 高 校 教学 改革 与 课程 建 
设 的 需要 ,要 有 特色 风格 有 创新 性 (新 体系 、 新 内 容 、 新 手段 ,新 思路 ,教材 的 内 容 体 系 有 和 较 
高 的 科学 创新 ,技术 创新 和 理念 创新 的 含量 )、 先 进 性 (对 原 有 的 学 科 体系 有 实质 性 的 改革 和 
发 展 ,顺应 并 符合 21 世纪 教学 发 展 的 规律 ,代表 并 引领 课程 发 展 的 趋势 和 方向 ) 、 示 范 性 ( 教 
材 所 体现 的 课程 体系 具有 较 广 泛 的 辐射 性 和 示范 性 ) 和 一 定 的 前 上 脆性。 教材 由 个 人 申报 或 
各 校 推荐 (通过 所 在 高 校 的 “ 编 委 会 "成 员 推荐 ) ,经 “ 编 委 会 "认真 评审 ,最 后 由 清华 大 学 出 版 
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社 审定 出 版 。 
目前 ,针对 计算 机 类 和 电子 信息 类 相关 专业 成 立 了 两 个 “ 编 委 会 ”, 即 “清华 大 学 出 版 社 
计算 机 教材 编审 委员 会 > 和 * 清 华 大 学 出 版 社 电子 信息 教材 编审 委员 会 >。 推出 的 特色 精品 


教材 包括 : 

CD 21 世纪 高 等 学 校规 划 教材 。 计算 机 应 用 一 一 高 等 学 校 各 类 专业 ,特别 是 非 计算 机 
专业 的 计算 机 应 用 类 教材 。 

(2) 21 世纪 高 等 学 校规 划 教材 。 计算 机 科学 与 技术 一 一 高 等 学 校 计算 机 相关 专业 的 
教材 。 


(3) 21 世纪 高 等 学 校规 划 教材 。 电子 信息 一 一 高 等 学 校 电子 信息 相关 专业 的 教材 。 
(4) 21 世纪 高 等 学 校规 划 教 材 . 软件 工程 一 一 高 等 学 校 软件 工程 相关 专业 的 教材 。 
(5) 21 世纪 高 等 学 校规 划 教材 。 信息 管理 与 信息 系统 。 

(6) 21 世纪 高 等 学 校规 划 教材 。 财经 管理 与 应 用 。 

(7) 21 世纪 高 等 学 校规 划 教材 .电子 商务 。 

(8) 21 世纪 高 等 学 校规 划 教材 。 物 联网 。 


清华 大 学 出 版 社 经 过 三 十 多 年 的 努力 ,在 教材 尤其 是 计算 机 和 电子 信息 类 专业 教材 出 
版 方面 树立 了 权威 品牌 ,为 我 国 的 高 等 教育 事业 做 出 了 重要 贡献 。 清 华 版 教材 形成 了 技术 
准确 、 内 容 严谨 的 独特 风格 ,这 种 风格 将 延续 并 反映 在 特色 精品 教材 的 建设 中 。 


清华 大 学 出 版 社 教材 编审 委员 会 
KRA: WIL 


E-mail: weijj@ tup. tsinghua. edu. cn 


随 着 软件 应 用 领域 的 不 断 深 入 .设计 复杂 程度 的 逐步 扩大 、 开 发 周期 的 不 断 缩短 、 质 量 
要 求 的 不 断 提高 ,软件 企业 也 面临 着 巨大 的 挑战 。 因 此 ,加 强 软件 测试 过 程 和 技术 ,可 以 有 
效 地 保证 软件 质量 。 这 种 观念 正在 被 更 多 的 软件 企业 人 士 所 理解 .接受 和 实施 ,也 是 软件 企 
业 快速 发 展 的 必 有 经 之 路 。 

软件 测试 是 软件 工程 中 重要 的 组 成 部 分 ,是 软件 质量 保证 的 关键 步骤 ,是 保证 软件 质量 
的 必要 依据 ,对 保证 软件 质量 具有 重要 意义 。 关 于 软件 测试 的 研究 结果 表明 : 软件 中 存在 
的 问题 发 现 得 越 早 ,软件 的 开发 费用 就 越 低 ; 在 编码 后 修改 软件 缺陷 的 成 本 是 编码 前 的 10 
倍 ,在 产品 交付 后 修改 软件 缺陷 的 成 本 是 交付 前 的 10 倍 ; 软件 质量 越 高 ,软件 发 布 后 的 维 
护 费用 就 越 低 。 软 件 测试 费用 占 整个 软件 工程 所 有 研发 费用 的 50% 以 上 。 

掌握 好 的 软件 测试 方法 是 提升 软件 企业 工作 质量 的 基础 ; 编制 好 的 软件 测试 过 程 是 提 
升 软件 企业 工作 质量 的 前 提 ; 软件 测试 是 提升 软件 企业 硬件 水 平 的 根本 手段 ,改进 软件 组 
织 管理 过 程 的 必要 途径 。 为 了 培养 具备 软件 工程 思想 和 技术 以 及 相应 开发 经 验 的 计算 机 和 
软件 人 才 , 国 家 近年 来 一 直 十 分 重视 软件 工程 相关 课程 的 建设 工作 。 

在 此 背景 下 ,《 实 用 软件 测试 一 书 应 运 而 生 。 该 书 突出 实用 特色 ,讲述 软件 测试 的 相关 
概念 、 方 法 和 技能 。 

全 书 分 为 三 大 部 分 : 基础 篇 ,技术 篇 .工具 篇 。 基 础 篇 讲述 软件 测试 与 软件 质量 的 基础 
理论 ,为 后 面 的 学 习 竟 定 了 一 定 的 理论 基础 ; 技术 篇 讲述 面向 传统 开发 过 程 、 面 向 软件 工程 
层面 的 软件 测试 和 自动 化 测试 以 及 敏捷 测试 ; 工具 篇 介绍 黑 盒 测试 工具 与 白 盒 测试 工具 、 
性 能 测试 工具 与 安全 测试 工具 以 及 测试 管理 工具 ,并 选取 了 常用 软件 测试 工具 讲述 其 使 用 
方法 。 本 书 中 提出 了 一 个 可 操作 性 强 、 易 于 上 手 的 解决 办 法 ,能 够 帮助 读者 清晰 地 了 解 软 件 
测试 的 整个 过 程 ,理解 如 何 做 好 软件 测试 工作 。 

本 书 围绕 着 实际 的 软件 项 目 展开 ,理论 联系 实际 ,给 出 了 具有 很 强 实践 性 的 软件 测试 具 
体 建议 。 在 学 术 上 ,本 书 的 主要 线索 是 编者 在 软件 测试 基本 知识 的 基础 上 ,结合 长 期 从 事 软 
件 测试 工作 的 实际 经 验 ,剪裁 出 来 的 一 个 针对 软件 测试 的 实用 方法 。 

本 书 重视 实践 能 力 和 操作 能 力 的 培养 ,内 容 翔 实 ` 条 例 清 晰 、 循 序 渐 进 、 图 文 并 茂 、 理 论 
扎实 、 实 用 性 强 , 并 在 案例 讲述 过 程 中 穿插 相关 的 基础 知识 和 基本 理论 介绍 ,做 到 理论 与 实 
践 相 结 合 ,方法 与 应 用 相 结合 ,读者 可 以 最 快 的 速度 理解 和 掌握 软件 测试 的 基本 概念 和 操作 
实务 ,可 以 帮助 软件 测试 人 员 快 速 应 用 到 工作 中 ,有 效 提高 项 目 质量 和 效率 。 

本 书 是 软件 测试 相关 课程 的 配套 教材 ,适用 于 企 事业 等 单位 从 事 软 件 测试 工作 的 人 员 
参考 学 习 , 也 可 作为 大 中 专 院 校 计算 机 、 软 件 工 程 、 测 试 等 相关 专业 师 生 自学 、 教 学 参考 书 以 
及 社会 各 类 培训 班 的 即 学 即 用 教材 ,也 适用 于 计算 机 技术 与 软件 专业 技术 资格 (水 平 ) 考 试 
的 继续 教育 。 

本 书 具 有 以 下 特点 。 
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(1) 编者 多 年 从 事 软件 测试 的 经 验 总 结 ,来 源 于 实践 ,更 具 实 用 性 。 

(2) 理论 联系 实际 ,围绕 真实 的 软件 项 目 展 开 。 

(3) 读者 只 要 完整 地 研读 了 本 书 , 就 切实 掌握 了 整个 软件 测试 的 全 貌 。 

(4) 提供 完整 的 软件 测试 操作 实务 ,读者 可 直接 用 于 实践 。 

(5) 循序 渐进 。 本 书 将 内 容 分 为 基础 篇 .技术 篇 ` 工 具 篇 三 大 部 分 ,层次 分 明 ,便于 循序 
渐进 地 讲述 知识 ,便于 读者 学 习 与 理解 。 

(6) 实用 性 强 。 本 书 所 选 案例 贯穿 全 书 ,以 案例 驱动 ; 又 对 不 同 的 测试 方法 和 技术 选 
用 不 同 的 案例 ,做 到 有 所 针对 ; 同时 介绍 了 工具 使 用 和 文档 撰写 ,具有 很 强 的 实用 性 。 

CD 理论 结合 。 本 书 在 案例 介绍 、 工 具 介 绍 过 程 中 穿插 相关 的 理论 知识 和 基本 方法 ,使 
基础 知识 更 具体 形象 ,同时 也 更 容易 被 理解 和 应 用 。 

(8) 实时 性 强 。 本 书 所 选 案例 均 是 近年 来 的 真实 案例 ,可 以 代表 当代 技术 特征 和 需求 
环境 ; 本 书 介绍 的 工具 均 是 当前 常见 的 软件 测试 工具 ; 面向 对 象 测试 策略 的 内 容 符合 软件 
测试 技术 的 发 展 方向 。 


1. 章节 内 容 与 编写 情况 介绍 


软件 质量 是 软件 产品 的 生命 线 ; 软件 测试 是 保证 软件 质量 的 必要 手段 。 本 书 力求 通过 
循序 渐进 、 图 文 并 茂 的 方式 使 读者 能 以 最 快 的 速度 理解 和 掌握 基本 概念 和 应 用 方法 。 全 书 
共计 10 章 , 各 章 的 内 容 安排 如 下 。 

第 1 章 介绍 软件 缺陷 与 软件 测试 的 基本 概念 、 软 件 测 试 技术 的 发 展 历史 与 现状 .软件 测 
试 过 程 、. 软 件 测试 与 软件 开发 的 联系 及 其 重要 性 与 实质 。 

第 2 章 介 绍 质量 与 软件 质量 的 基本 概念 、 软 件 质量 模型 .标准 的 发 展 情况 以 及 软件 质 
量 、 软 件 质量 保证 与 软件 测试 的 区 别 与 联系 。 

第 3 章 介绍 面向 传统 开发 过 程 的 软件 测试 ,涉及 的 内 容 有 软件 测试 模型 .软件 生命 周 
期 .单元 测试 .集成 测试 .系统 测试 。 

第 4 章 介绍 面向 软件 工程 层面 的 软件 测试 ,涉及 的 内 容 有 面向 对 象 的 测试 .面向 方面 的 
测试 和 面向 SOA 的 测试 。 

第 5 章 介绍 自动 化 测试 的 有 关内 容 , 如 自动 化 测试 的 优点 ` 基 本 原则 、 实 现 策略 与 步 
JE. 

第 6 章 结合 项 目 实例 介绍 敏捷 测试 每 个 阶段 的 主要 测试 活动 ,分 析 每 个 主要 测试 活动 
的 前 提 条 件 和 目标 任务 ,推荐 最 佳 的 解决 方案 。 

第 7 章 介 绍 软件 测试 工具 的 总 体 情况 ,涉及 的 内 容 有 工具 角度 分 类 、 常 见 测试 工具 的 对 
比 、 测 试 工具 的 选择 方法 。 

第 8 章 介绍 面向 功能 的 测试 工具 。 

第 9 章 介绍 面向 质量 属性 角度 的 测试 工具 ,包括 性 能 测试 工具 和 安全 测试 工具 两 部 分 
内 容 。 
第 10 章 介 绍 测试 管理 工具 ,包括 缺陷 管理 工具 和 综合 管理 工具 两 部 分 内 容 。 
附录 介绍 软件 测试 的 相关 术语 和 常见 问题 ,以 及 全 国 计 算 机 技术 与 软件 专业 技术 资 
格 ( 水 平 ) 考 试 软件 评测 师 的 最 新 考试 大 纲 和 模拟 试题 .参考 答案 .评分 标准 。 

本 书 的 末尾 还 附 有 模拟 试题 与 解答 以 供 读者 熟悉 和 巩固 所 学 知识 ,作者 将 长 期 实践 的 
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经 验 融 入 其 中 ,相信 必 会 使 读者 受益 匪 浅 。 在 本 书 中 ,强调 知识 重点 并 给 予 读 者 练习 的 机 
会 ,最 好 能 够 详细 阅读 并 亲身 实践 。 

本 书 由 李 炳 森 任 主编 ,并 率领 编 委 会 的 委员 们 对 全 书 进行 了 统筹 .规划 、 审 校 , 修 改 和 协 
调 , 委 员 们 对 全 书 的 编写 也 提出 了 许多 宝贵 的 意见 或 建议 ,并 为 本 书 提供 了 很 多 有 价值 的 素 
材 。 其 中 ,第 1.2 章 由 李 炳 森 、 田 杰 、 段 成 峰 、 田 国 栋 、. 刘 红云 共同 编写 ,第 3 一 5 章 由 班 日 哲 、 
张 华 、 李 炳 森 共同 编写 ,第 6 章 由 陈 晓 颖 、 李 炳 森 共 同 编写 ,第 7 一 10 章 由 班 日 哲 、 张 华 、 李 炳 
森 共 同 编写 ,附录 A、 附 录 B 由 梁 金 静 负 责 收集 整理 ,附录 C 由 李 炳 森 负责 收集 整理 ,附录 
D、 附 录 玉 由 张 华 、 李 炳 森 共 同 编写 。 


2. 技术 支持 


本 书 由 彦 哲 研究 院 组 织 编写 。 彦 哲 研 究 院 是 北京 彦 哲 信息 技术 服务 有 限 公司 的 专家 顾 
问 委员 会 ,组 建 于 2006 年 5 月 18 日 ,其 前 身 为 管理 与 信息 化 联盟 ,由 多 位 资深 的 信息 化 管 
理 专家 自愿 发 起 ,是 信息 化 管理 先进 理论 与 最 佳 实践 有 机 结合 的 推进 者 ,是 跨 地 区 、 跨 行业 
的 专业 服务 组 织 。 其 宗旨 是 加 强 全 国信 息 化 管理 领域 的 交流 与 合作 ,积极 推进 国家 信息 化 
建设 和 管理 工作 的 发 展 。 彦 哲 研 究 院 总 部 设 在 北京 , 现 有 研究 员 五 百 余 名 ,分 布 在 全 国 五 十 
多 个 大 中 城市 的 多 个 行业 领域 。 

有 关 本 书 的 意见 反馈 和 咨询 ,读者 可 登录 由 彦 哲 研 究 院 主办 的 信息 化 管理 专家 网 
(http://www. yima. org. cn) 与 编者 进行 交流 。 

与 本 书 配套 的 PPT 课件 等 教学 资源 可 以 从 清华 大 学 出 版 社 网 站 www. tup. com. cn 下 
载 ,关于 本 书 与 课件 使 用 中 的 任何 问题 ,请 联系 fuhy@tup. tsinghua. edu. cn, 
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软件 测试 概述 | 


质量 是 企业 的 生命 线 。 当 然 , 软 件 质量 就 是 软件 企业 的 生命 线 , 或 者 说 软件 质量 就 是 软 
件 的 生命 。 为 了 保证 软件 的 质量 ,人 们 在 长 期 的 开发 过 程 中 积累 了 许多 经 验 并 形成 了 许多 
行 之 有 效 的 方法 。 但 是 借助 这 些 方法 ,只 能 尽 可 能 地 减少 软件 中 的 错误 和 不 足 , 却 不 能 完全 
避免 所 有 的 错误 。 

如 果 把 所 开发 出 来 的 软件 看 作 一 个 企业 生产 的 产品 ,那么 软件 测试 就 相当 于 该 企业 的 
质量 检测 部 分 。 简 单 地 说 ,在 编写 完 一 段 代码 之 后 ,检查 其 是 否 如 所 预期 的 那样 运行 ,这 个 
活动 就 可 以 看 作 是 一 种 软件 测试 工作 。 新 的 测试 理论 ,测试 方法 \ 测 试 技 术 手 段 在 不 断 涌 出 ， 
软件 测试 机 构 和 组 织 也 在 迅速 产生 和 发 展 ,由 此 软件 测试 技术 职业 也 同步 完善 和 健全 起 来 。 


本 章 学 习 重 点 


° 了 解 什么 是 软件 缺陷 。 

° 了解 软件 测试 技术 的 发 展 历史 与 现状 。 
。 掌握 软件 测试 的 概念 。 

。 熟悉 软件 测试 的 过 程 。 

* 熟悉 软件 测试 与 软件 开发 之 间 的 关系 。 
。 了 解 软件 测试 的 重要 性 和 实质 。 


本 章 学 习 难 点 
了 解 软件 测试 的 实质 。 


C1 软件 缺陷 


1. 软件 缺陷 的 起 源 


软件 缺陷 (Defect) ,常常 被 称 为 Bug。 下 面 来 了 解 一 下 软件 Bug 名 称 的 起 源 。 
1946 年 ,Grace Hopper 在 发 生 故 障 的 Mark I 计算机 的 继电器 触 点 里 ,找到 了 一 只 被 来 
扁 的 小 飞 蛾 , 正 是 这 只 小 虫子 “ 卡 ” 住 了 机 器 的 运行 。Hopper 顺手 将 飞 蛾 夹 在 工作 笔记 里 ， 
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并 议 谐 地 把 程序 故障 称 为 "Bug”。Bug 的 意思 是 “臭虫 ", 而 这 一 奇怪 的 称呼 ,后 来 演变 成 计 
算 机 行业 的 专业 术语 。 虽 然 现 代 计算 机 再 也 不 可 能 严 扁 任何 飞 蛾 ,大 家 还 是 习惯 地 把 排除 
程序 故障 叫 作 Debug. 

Grace Murray Hopper 被 称 为 计算 机 之 母 , 是 计算 机 专业 的 先驱 人 物 , 开 发 了 
COBOL 一 一 一 种 被 广泛 应 用 于 商业 的 程序 语言 。 

她 是 推动 计算 机 普及 化 的 功臣 ,被 同僚 称 为 是 个 “数学 家 、 计 算 机 科学 家 、 社 会 学 家 、 企 
业 政治 家 ,行销 专家 、 计 算 机 系统 及 程序 设计 家 …… 还 有 ,永远 都 是 个 预知 者 ”。 她 于 1992 
年 逝世 。 

1928 年 ,Grace Hopper 女士 从 Vassa 数学 系 毕业 后 ,她 拜 在 数学 家 Oystein Ore 门下 ， 
1934 年 拿 到 了 耶鲁 大 学 的 数学 硕士 资格 ,她 与 计算 机 真正 结缘 应 该 是 在 她 加 入 美国 海军 的 
WAVES 组 织 后 ,以 中 尉 的 身份 加 入 了 在 哈佛 大 学 的 研究 ,也 是 第 三 位 加 入 这 项 研究 的 科 
学 家 。 

1949 年 ,她 加 入 了 Eckert-Mauchly 公司 , 一 直到 1971 年 正式 离职 。 在 Eckerd- 
Mauchly 公司 ,Hopper 为 第 一 代 大 规模 数字 计算 机 发 明了 程序 语言 ,并 一 同 发 明了 相关 的 
编译 系统 A-O。1952 年 ,发 布 了 关于 编译 系统 的 第 一 份 论文 。A-O 的 下 一 代 产 品 被 命 
名 为 FLOW-MATIC ,直接 导致 了 COBOL 程序 语言 的 产生 。 在 COBOL 产生 之 前 ,大 家 一 
直 都 在 用 汇编 语言 编写 程序 。Hooper 成 功 地 使 程序 语言 的 语法 同 自然 语言 的 语法 相 类 似 ， 
这 样 , 非 技 术 人 员 也 可 以 编写 代码 ,开启 了 商业 程序 代码 的 时 代 , 将 编程 工作 的 范围 从 科学 
工程 领域 逐渐 扩大 开 来 。 

Hopper 在 海军 一 直 供 职 到 1986 年 ,逝世 前 曾 作为 DEC 的 高 级 顾问 工作 了 很 短 的 一 段 
时 间 。Hopper 是 早期 提出 共享 代码 库 的 人 士 之 一 ,并 发 明了 用 于 编译 软件 的 编译 系统 以 
及 编译 标准 。Hopper 为 Mark 工 以 及 后 续 机 器 Mark Il , Mark 了 编写 出 大 量 软件 。 

她 在 软件 设计 领域 的 一 大 “发 明 ”, 就 是 创造 出 著名 的 计算 机 术语 Bug, 


2. 软件 缺陷 的 定义 


软件 缺陷 (Bug) , 即 计算 机 系统 或 者 程序 中 存在 的 任何 一 种 破坏 正常 运行 能 力 的 问题 、 
错误 ,或 者 隐藏 的 功能 缺陷 、 瑕 癣 。 缺 陷 会 导致 软件 产品 在 某 种 程度 上 不 能 满足 用 户 的 
需要 。 

Error 属于 缺陷 的 一 种 一 一 内 部 缺陷 ,往往 是 软件 本 身 的 问题 ,如 程序 的 算法 错误 、 语 
法 错误 ,数据 计算 不 正确 \ 数 据 滋 出 等 。 软 件 错误 往往 导致 系统 某 项 功能 失效 ,或 成 为 系统 
使 用 的 故障 。 软 件 的 故障 .失效 是 指 软件 所 提供 给 用 户 的 功能 或 服务 ,不 能 达到 用 户 的 要 求 
或 没有 达到 事先 设计 的 指标 ,在 功能 使 用 时 中 断 , 最 后 的 结果 或 得 到 的 结果 是 不 正确 的 。 软 
件 缺 陷 的 产生 主要 是 由 软件 产品 的 特点 和 开发 过 程 决定 的 。 

国际 标准 IEEE 729—1983 对 缺陷 有 一 个 标准 的 定义 : 从 产品 内 部 看 ,缺陷 是 软件 产品 
开发 或 维护 过 程 中 存在 的 错误 毛病 等 各 种 问题 ; 从 产品 外 部 看 ,缺陷 是 系统 所 需要 实现 的 
某 种 功能 的 失效 或 违背 。 


3. 软件 缺陷 的 类 型 
软件 缺陷 表现 的 形式 有 多 种 ,不 仅 体现 在 功能 的 失效 方面 ,还 体现 在 其 他 方面 。 软 件 缺 
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陷 的 主要 类 型 有 以 下 几 种 。 

(1) 软件 未 实现 产品 说 明 书 要 求 的 功能 。 功 能 、 特 性 没有 实现 或 部 分 实现 。 如 设计 不 
合理 ,存在 缺陷 。 

(2) 软件 出 现 了 产品 说 明 书 指明 不 会 出 现 的 错误 。 实际 结果 和 预期 结果 不 一 致 ,如 运 
行 出 错 ,包括 运行 中 断 、 系 统 崩 溃 、. 界 面 混乱 ,再 如 数据 结果 不 正确 、 精 度 不 够 。 

(3) 软件 超出 实现 了 产品 说 明 书 提 到 的 功能 。 软 件 实现 了 产品 规格 说 明 没有 提 到 的 功 
能 模块 。 

(4) 软件 没有 实现 产品 说 明 书 虽 未 明确 指出 但 应 该 实现 的 目标 。 

(5) 软件 难以 理解 ,不 易 使 用 ,运行 缓慢 或 者 最 终 用 户 认为 不 好 。 用 户 不 能 接受 的 其 他 
问题 ,如 存 取 时 间 过 长 ,界面 不 美观 。 


4. 软件 缺陷 的 级 别 


作为 软件 测试 员 , 可 能 所 发 现 的 大 多 数 问题 不 是 那么 明显 、 严 重 ,而 是 难以 觉察 的 简单 
而 细微 的 错误 ,有 些 是 真正 的 错误 ,也 有 些 不 是 。 一 般 来 说 ,问题 越 严重 的 ,其 优先 级 越 高 ， 
越 要 得 到 及 时 的 纠正 。 软 件 公司 对 缺陷 严重 性 级 别 的 定义 不 尽 相 同 , 但 一 般 可 以 概括 为 以 
下 4 种 级 别 。 

(1) 微小 的 (Minor) 。 一 些小 问题 如 有 个 别 错别字 文字 排版 不 整齐 等 ,对 功能 几乎 没 
有 影响 ,软件 产品 及 属性 仍 可 使 用 。 

(2) 一 般 的 (Major)。 不 太 严 重 的 错误 ,这 样 的 软件 缺陷 虽然 不 影响 系统 的 基本 使 用 ， 
但 没有 很 好 地 实现 功能 ,没有 达到 预期 效果 ,如 次 要 功能 模块 丧失 、 提 示 信 息 不 够 准确 .用 户 
界面 差 和 操作 时 间 长 等 。 

(3) 严重 的 (Critical) 。 严 重 错误 , 指 功能 或 特性 没有 实现 ,主要 功能 部 分 丧失 ,次 要 功 
能 全 部 丧失 ,或 致命 的 错误 声明 。 

(4) 致命 的 (Fatal) 。 致 命 的 错误 ,造成 系统 崩溃 、 死 机、 系统 悬挂 ,或 造成 数据 丢失 、 主 
要 功能 完全 丧失 等 。 


5. 软件 缺陷 的 状态 


软件 缺陷 除了 严重 性 之 外 ,还 存在 反映 软件 缺陷 处 于 一 种 什么 样 的 状态 ,便于 跟踪 和 管 
理 某 个 产品 的 缺陷 ,可 以 定义 不 同 的 Bug 状态 。 

CD 激活 或 打开 : 问题 没有 解决 .存在 源 代码 中 ,确认 “提交 的 缺陷 ”, 等 待 处 理 , 如 测试 
人 员 新 报 的 缺陷 或 者 验证 后 Bug 依然 存在 。 

(2) 已 修正 或 修复 : 已 被 开发 人 员 检 查 、 修 复 过 的 缺陷 ,通过 单元 测试 ,认为 已 经 解决 
但 还 没有 被 测试 人 员 验 证 。 

(3) 关闭 或 非 激活 : 测试 人 员 验 证 已 经 修正 的 Bug 后 ,确认 缺陷 不 存在 之 后 的 状态 。 

(4) 重新 打开 : 测试 人 员 验 证 后 ,缺陷 没有 通过 所 标志 的 状态 ; 或 已 经 修改 正确 的 问 
题 , 又 重新 出 现 错误 。 

(5) 推迟 : 可 以 在 下 一 个 版 本 中 修复 。 

(6) 保留 : 由 于 技术 原因 或 者 第 三 方 软件 的 缺陷 ,开发 人 员 不 能 修复 的 缺陷 。 

CD 不 能 重 现 : 开发 不 能 再 现 , 需 要 测试 人 员 检 查 缺 陷 再 现 的 步 又。 
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(8) 需要 更 多 信息 : 开发 能 再 现 这 个 缺陷 ,但 开发 人 员 需 要 一 些 信息 ,如 日 志文 件 、 
图 片 。 


6. 软件 缺陷 的 产生 原因 


在 软件 开发 的 过 程 中 ,软件 缺陷 的 产生 是 不 可 避免 的 。 那 么 造成 软件 缺陷 的 主要 原因 
有 哪些 ? 可 以 从 软件 本 身 、 团 队 工作 和 技术 问题 等 多 个 方面 分 析 , 就 可 以 了 解 造成 软件 缺陷 
的 主要 因素 ,比较 容易 确定 造成 软件 缺陷 的 原因 ,软件 缺陷 的 产生 主要 是 由 软件 产品 的 特点 
和 开发 过 程 决定 的 。 现 归纳 如 下 。 

1) 软件 本 身 造成 的 问题 

(1) 需求 不 清晰 ,导致 设计 目标 偏离 客户 的 需求 ,从 而 引起 功能 或 产品 特征 上 的 缺陷 。 

(2) 系统 结构 非常 复杂 ,而 又 无 法 设计 成 一 个 很 好 的 层次 结构 或 组 件 结构 ,结果 导致 意 
想不到 的 问题 或 系统 维护 .扩充 上 的 困难 ; 即使 设计 成 良好 的 面向 对 象 的 系统 ,由 于 对 象 、 
类 太 多 ,很 难 完成 对 各 种 对 象 . 类 相互 作用 的 组 合 测试 ,而 隐藏 着 一 些 参数 传递 .方法 调用 、 
对 象 状态 变化 等 方面 的 问题 。 

(3) 对 程序 罗 辑 路 径 或 数据 范围 的 边界 考虑 不 够 周全 , 漏 掉 某 些 边 界 条 件 ,造成 容量 或 
边界 错误 ,或 者 引起 强度 或 负载 问题 。 

(4) 对 一 些 实 时 应 用 ,要 进行 精心 设计 和 技术 处 理 , 保 证 精确 的 时 间 同 步 ,否则 容易 引 
起 时 间 上 不 协调 ,不 一 致 性 带 来 的 问题 。 

(5) 没有 考虑 系统 崩溃 后 的 自我 恢复 或 数据 的 异地 备份 .灾难 性 恢复 等 问题 ,从 而 存在 
系统 安全 性 、 可 靠 性 的 隐患 。 

(6) 系统 运行 环境 的 复杂 ,不仅 用 户 使 用 的 计算 机 环境 千变万化 ,包括 用 户 的 各 种 操作 
方式 或 各 种 不 同 的 输入 数据 ,容易 引起 一 些 特定 用 户 环境 下 的 问题 ; 在 系统 实际 应 用 中 , 数 
据 量 很 大 ,从 而 会 引起 强度 或 负载 问题 。 

(7) 由 于 通信 端口 多 、 存 取 和 加 密 手 段 的 巴 盾 性 等 ,会 造成 系统 的 安全 性 或 适用 性 等 
问题 。 

(8) 新 技术 的 采用 ,可 能 涉及 技术 或 系统 兼容 的 问题 ,事先 没有 考虑 到 。 

(9) 文档 错误 .内容 不 正确 或 拼写 错误 。 

(10) 硬件 或 系统 软件 上 存在 的 错误 。 

(11) 软件 开发 标准 或 过 程 上 的 错误 。 

2) 团队 工作 造成 的 问题 

(1) 系统 需求 分 析 时 对 客户 的 需求 理解 不 清楚 ,或 者 和 用 户 的 沟通 存在 一 些 困难 。 

(2) 不 同 阶段 的 开发 人 员 相 互 理解 不 一 致 。 例 如 ,软件 设计 人 员 对 需求 分 析 的 理解 有 
偏差 ,编程 人 员 对 系统 设计 规格 说 明 书 某 些 内 容重 视 不 够 ,或 存在 误解 。 

(3) 对 于 设计 或 编程 上 的 一 些 假定 或 依赖 性 ,相关 人 员 没 有 充分 沟通 。 

(4) 项 目 组 成 员 技 术 水 平 参 差 不 齐 ,新 员工 较 多 ,或 培训 不 够 等 原因 也 容易 引起 
问题 。 

3) 技术 问题 

(1) 算法 错误 : 在 给 定 条 件 下 没 能 给 出 正确 或 准确 的 结果 。 

(2) 语法 错误 : 对 于 编译 性 语言 程序 ,编译 器 可 以 发 现 这 类 问题 ; 但 对 于 解释 性 语言 程 
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序 , 只 能 在 测试 运行 时 发 现 。 

(3) 计算 和 精度 问题 : 计算 的 结果 没有 满足 所 需要 的 精度 。 

(4) 系统 结构 不 合理 ,算法 选择 不 科学 ,造成 系统 性 能 低下 。 

(5) 接口 参数 传递 不 匹配 ,导致 模块 集成 出 现 问题 。 

4) 项 目 管理 的 问题 

(1) 缺乏 质量 文化 ,不 重视 质量 计划 ,对 质量 ,资源 ,任务 、 成 本 等 的 平衡 性 把 握 不 好 , 容 
易 挤 掉 需 求 分 析 、 评 审 、 测 试 等 时 间 , 遗 留 的 缺陷 会 比较 多 。 

(2) 系统 分 析 时 对 客户 的 需求 不 是 十 分 清楚 ,或 者 和 用 户 的 沟通 存在 一 些 困难 。 

(3) 开发 周期 短 ,需求 分 析 、 设 计 、 编 程 \ 测 试 等 各 项 工作 不 能 完全 按照 定义 好 的 流程 来 
进行 ,工作 不 够 充分 ,结果 也 就 不 完整 .不 准确 ,错误 较 多 ; 周期 短 , 还 给 各 类 开发 人 员 造 成 
太 大 的 压力 ,引起 一 些 人 为 的 错误 。 

(4) 开发 流程 不 够 完善 ,存在 太 多 的 随机 性 和 缺乏 严谨 的 内 审 或 评审 机 制 , 容 易 产 生 
问题 。 

(5) 文档 不 完善 ,风险 估计 不 足 等 。 


7. 软件 缺陷 的 组 成 与 分 布 


软件 缺陷 是 由 很 多 原因 造成 的 ,如 果 把 它们 按 需 求 分 析 结果 一 一 规格 说 明 书 .系统 设计 
结果 、 编 程 的 代码 等 归 类 起 来 ,通过 对 缺陷 分 布 情况 的 仔 , 
细 分 析 , 可 以 帮助 我 们 将 测试 的 主要 精力 更 好 地 集中 到 最 15% 65 
有 价值 的 地 方 , 图 1-1 显示 了 缺陷 的 分 布 情况 。 比 较 后 发 
现 , 需 求 和 架构 设计 规格 说 明 书 是 软件 缺陷 出 现 最 多 的 地 


方 。 可 以 看 出 ,缺陷 的 起 源 及 其 比例 如 下 。 b | 
COD 需求 和 架构 设计 54%。 规格 说 明 书 
(2) 设计 阶段 25%。 
(3) 编码 阶段 15%. 图 1-1 软件 缺陷 构成 示意 图 


CD 其 他 6%。 

在 开发 早期 ,错误 通常 是 很 多 的 ,而 且 令 人 讨厌 的 是 它们 还 会 转移 到 后 期 。 这 和 制造 业 
的 装配 线 类 似 ,如 果 一 个 坏 零 件 或 次 品 被 允许 上 线 , 从 这 点 开始 ,包含 它 的 组 件 就 是 “ 坏 ” 的 ， 
如 果 该 组 件 下 了 线 , 并 出 了 厂 门 , 情 况 就 会 更 糟糕 ,必须 为 这 个 坏 零 件 付 出 代价 。 换 名 话说， 
错误 不 是 自封 闭 的 , 当 它 们 转移 到 后 面 的 组 件 中 时 ,往往 会 以 新 的 形式 出 现 。 

所 有 的 错误 都 是 要 付出 代价 的 。 没 有 被 发 现 的 错误 ,以 及 那些 在 开发 过 程 中 很 晚 才 
发 现 的 错误 都 是 成 本 最 高 的 ,没有 被 发 现 的 错误 会 在 系统 中 迁移 、 扩 散 , 最 终 导致 系统 失 
效 , 造 成 严重 的 财产 损失 ,有 时 还 会 带 来 法 律 上 的 麻烦 ,系统 将 终身 为 此 付出 高 昂 的 
代价 。 

这 意味 着 测试 是 贯穿 开发 全 过 程 的 工作 ,也 意味 着 对 最 终 产 品 的 测试 不 仅 是 软件 质量 
大 战 中 的 一 个 战 生 ,而 且 不 是 代价 最 高 的 战役 。 今 天 40 名 一 70 闪 的 软件 开发 时 间 和 资源 都 
花 在 查 错 和 纠 错 上 。 不 幸 的 是 大 多 数组 织 还 没有 一 套 办 法 来 准确 地 计算 成 本 。 不 管 怎样 ， 
在 使 用 测试 资源 方面 任何 有 意义 的 改进 都 能 极 大 地 降低 开发 成 本 。 
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T 软件 测试 技术 的 发 展 历史 与 现状 


1. 软件 测试 技术 的 发 展 历史 


随 着 计算 机 的 诞生 一 一 在 软件 行业 发 展 初期 就 已 经 开始 实施 软件 测试 ,软件 测试 是 伴 
随 着 软件 的 产生 而 产生 的 ,有 了 软件 生产 和 运行 就 必然 有 软件 测试 。 但 早期 的 软件 开发 过 
程 中 ,这 一 阶段 还 没有 系统 意义 上 的 软件 测试 ,测试 的 含义 比较 狭 窗 , 更 多 的 是 一 种 类 似 调 
试 的 测试 ,将 测试 等 同 于 “调试 ”, 目 的 是 纠正 软件 中 已 经 知道 的 故障 ,常常 由 开发 人 员 自 己 
完成 这 部 分 的 工作 。 测 试 是 没有 计划 和 方法 的 ,测试 用 例 的 设计 和 选取 也 都 是 根据 测试 人 
员 的 经 验 随 机 进行 的 ,大 多 数 测试 的 目的 是 为 了 证 明 系 统 可 以 正常 运行 。 对 测试 的 投入 极 
少 ,测试 介 人 得 也 晚 ,常常 是 等 到 形成 代码 ,产品 已 经 基本 完成 时 才 进 行 测试 。 

直到 1957 年 ,软件 测试 才 开始 与 调试 区 别 开 来 ,成 为 一 种 发 现 软件 缺陷 的 活动 。 由 于 
一 直 存 在 着 为 了 使 我 们 看 到 产品 在 工作 ,就 得 将 测试 工作 往 后 推 一 点 的 思想 ,测试 仍然 是 后 
于 开发 的 活动 。 在 潜意识 里 ,我 们 的 目的 是 使 自己 确信 产品 能 工作 。 

20 世纪 50 年 代 后 期 到 20 世纪 60 年 代 , 各 种 高 级 语言 相继 诞生 ,测试 的 重点 也 逐步 转 
入 到 使 用 高 级 语言 编写 的 软件 系统 中 ,但 程序 的 复杂 性 远 远 超过 了 以 前 。 尽 管 如 此 ,由 于 受 
到 硬件 的 制约 ,在 计算 机 系统 中 ,软件 仍然 处 于 次 要 位 置 。 软 件 正确 性 的 把 握 仍然 主要 依赖 
于 编程 人 员 的 技术 水 平 。 因 此 ,这 一 时 期 软件 测试 的 理论 和 方法 发 展 比较 缓慢 。 

到 了 20 世纪 70 年 代 , 尽 管 对 “软件 工程 ”的 真正 含义 还 缺乏 共识 ,但 这 一 词 条 已 经 频繁 
出 现 。1972 年 ,在 北 卡罗来纳 大 学 举行 了 首届 软件 测试 正式 会 议 。1975 年 ,John Good 
Enough 和 Susan Gerhart 在 IEEE 上 发 表 了 “测试 数据 选择 的 原理 (Torward a Theory of 
Test Data Selection)” 的 文章 ,软件 测试 才 被 确定 为 一 种 研究 方向 。 而 1979 年 ,Glen ford 
Myers 的 《软件 测试 艺术 》(The Art of Software Testing ) 可 算是 软件 测试 领域 的 第 一 本 最 
重要 的 专著 ,Myers 作为 当时 最 好 的 软件 测试 ,其 定义 是 :“ 测 试 是 为 发 现 错误 而 执行 的 一 
个 程序 或 者 系统 的 过 程 ”。Myers 以 及 他 的 同事 们 在 20 世纪 70 年 代 的 工作 是 测试 过 程 发 
展 的 里 程 碑 。 

20 世纪 70 年 代 以 后 , 随 着 计算 机 处 理 速度 的 提高 ,存储 器 容量 的 快速 增加 ,软件 在 整 
个 计算 机 系统 中 的 地 位 变 得 越 来 越 重 要 。 随 着 软件 开发 技术 的 成 熟 和 完善 ,软件 的 规模 也 
越 来 越 大 ,复杂 度 也 大 为 增加 。 因 此 ,软件 的 可 靠 性 面临 着 前 所 未 有 的 危机 ,给 软件 测试 工 
作 带 来 了 更 大 的 挑战 ,很 多 测试 理论 和 测试 方法 应 运 而 生 , 逐 渐 形 成 了 一 套 完整 的 体系 , 培 
养 和 造就 了 一 批 批 出 色 的 测试 人 才 。 

直到 20 世纪 80 年 代 早 期 “质量 ”的 号 角 才 开始 吹 响 。 软 件 测试 定义 发 生 了 改变 ,测试 
不 单纯 是 一 个 发 现 错误 的 过 程 ,而 且 包 含 软件 质量 评价 的 内 容 。 软 件 开 发 人 员 和 测试 人 员 
开始 坐 在 一 起 探讨 软件 工程 和 测试 问题 。 制 定 了 各 类 标准 ,包括 IEEE (Institute of 
Electrical and Electronic Engineers) 标准 ,美国 ANSI C American National Standard 
Institute) 标 准 以 及 ISO (International Standard Organization) 国际 标准 。1983 年 , Bill 
Hetzel 在 《软件 测试 完全 指南 》)(Complete Guide of Software Testing ) 一 书 中 指出 :“ 测 试 
是 以 评价 一 个 程序 或 者 系统 属性 为 目标 的 任何 一 种 活动 ,测试 是 对 软件 质量 的 度量 ”。 
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Myers 和 Hetzel 的 定义 至 今 仍 被 引用 。 

20 世纪 90 年 代 ,测试 工具 终于 盛行 起 来 。 人 们 普遍 意识 到 工具 不 仅 是 有 用 的 ,而 且 要 
对 今天 的 软件 系统 进行 充分 的 测试 ,工具 是 必 不 可 少 的 。 到 了 2002 年 ,Rick 和 Stefan 在 
《系统 的 软件 测试 (Systematic Software Testing ) 一 书 中 对 软件 测试 做 了 进一步 定义 :“ 测 
试 是 为 了 度量 和 提高 被 测 软件 的 质量 ,对 测试 软件 进行 工程 设计 、 实 施 和 维护 的 整个 生命 周 
期 过 程 ”。 这 些 经 典 论著 对 软件 测试 研究 的 理论 化 和 体系 化 产生 了 巨大 的 影响 。 

近 二 十 年 来 , 随 着 计算 机 和 软件 技术 的 飞速 发 展 ,软件 测试 技术 研究 也 取得 了 很 大 的 突 
破 , 测 试 专家 总 结 了 很 好 的 测试 模型 ,例如 著名 的 V 模型 、W 模型 等 ,在 测试 过 程 改进 方面 
提出 了 TMM(Testing Maturity Model) 的 概念 ,在 单元 测试 自动 化 测试 .负载 压力 测试 以 
及 测试 管理 等 方面 涌现 了 大 量 优秀 的 软件 测试 工具 。 


2. 软件 测试 的 国内 外 发 展现 状 


在 软件 比较 发 达 的 国家 ,特别 是 美国 ,软件 测试 已 经 发 展 成 为 一 个 独立 的 产业 ,主要 体 
现在 以 下 几 个 方面 。 

(1) 软件 测试 在 软件 公司 中 占有 重要 的 地 位 。 比 尔 。 盖 茨 曾 在 马萨诸塞 州 技术 学 院 的 
一 次 演讲 中 说 :“ 在 微软 ,一 个 典型 的 开发 项 目 组 中 测试 工程 师 要 比 编码 工程 师 多 得 多 ,可 
以 说 我 们 花费 在 测试 上 的 时 间 要 比 花费 在 编码 上 的 时 间 多 得 多 ”。 

(2) 软件 测试 理论 研究 攻 勃 发 展 ,每 年 举办 各 种 各 样 的 测试 技术 年 会 ,发 表 了 大 量 的 软 
件 测试 研究 论文 ,引领 软件 测试 理论 研究 的 国际 潮流 。 

(3) 软件 测试 市 场 繁 荣 。 美 国有 一 些 专业 公司 开发 软件 测试 标准 与 测试 工具 ,MI、 
Compuware, MaCabe, Rational 等 都 是 著名 的 软件 测试 工具 提供 商 ,它们 出 品 的 测试 工具 已 
经 占领 了 国际 市 场 ,目前 我 国 使 用 的 主流 测试 工具 大 部 分 是 国外 的 产品 ,而 且 在 世界 各 地 都 
可 以 看 到 它们 出 品 的 软件 测试 工具 ,可 见 国外 的 软件 测试 已 经 形成 了 较 大 的 产业 。 

在 我 国 ,软件 测试 可 能 算 不 上 一 个 真正 的 产业 ,软件 开发 企业 对 软件 测试 认识 淡薄 , 软 
件 测试 人 员 与 软件 开发 人 员 往 往 比 例 失调 ,而 在 发 达 国 家 和 地 区 软件 测试 已 经 成 了 一 个 产 
业 。 我 们 在 软件 测试 实现 方面 并 不 比 国外 差 ,国际 上 优秀 的 测试 工具 ,我 们 基本 都 有 ,这 些 
工具 所 体现 的 思想 我 们 也 有 深刻 的 理解 ,很 多 大 型 系统 在 国内 都 得 到 了 很 好 的 测试 。 

中 国 的 软件 测试 技术 研究 起 步 于 “六 五 "期间, 主要 是 随 着 软件 工程 的 研究 而 逐步 发 展 
起 来 的 ,由 于 起 步 较 晚 ,与 国际 先进 水 平 相 比 差距 较 大 。 直 到 1990 年 ,成 立 了 国家 级 的 中 国 
软件 评测 中 心 ,测试 服务 才 逐 步 开 展 起 来 。 因 此 ,我 国 无 论 是 在 软件 测试 理论 研究 还 是 在 测 
试 实践 上 ,和 国外 发 达 国 家 都 有 不 少 的 差距 ,主要 体现 在 对 软件 产品 化 测试 的 技术 研究 还 比 
较 贫 乏 , 从 业 人 员 较 少 ,测试 服务 没有 形成 足够 的 规模 等 方面 。 但 是 , 随 着 我 国 软件 产业 的 
莲 勃 发 展 以 及 对 软件 质量 的 重视 ,软件 测试 也 越 来 越 被 人 们 所 看 重 , 软 件 测 试 正 在 逐步 成 为 
一 个 新 兴 的 产业 。 我 国正 在 迈 入 测试 时 代 ,主要 体现 在 以 下 几 个 方面 。 

(1) 我 国 著名 的 软件 公司 都 已 经 或 者 正在 建立 独立 的 专职 软件 测试 队伍 ,虽然 测试 人 
员 规 模 以 及 所 占 比例 还 不 能 和 国外 的 大 公司 相 比 , 但 是 毕竟 在 公司 内 部 贯彻 了 独立 测试 的 
意识 。 

(2) 国家 人 事 部 和 信息 产业 部 2003 年 关于 职业 资格 认证 第 一 次 在 我 国有 了 “软件 评测 
师 ” 的 称号 ,这 是 国家 对 软件 测试 职业 的 高 度 重视 与 认可 。 
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(3) 在 信息 产业 部 关于 计算 机 系统 集成 资质 以 及 信息 系统 工程 监理 资质 的 认证 中 , 软 
件 测试 能 力 已 经 被 定 为 评价 公司 技术 能 力 的 一 项 重要 指标 。 

(4) 2001 年 ,信息 产业 部 发 布 的 部 长 5 号 令 , 实 行 了 软件 产品 登记 认证 制度 ,规定 : JU 
是 在 我 国境 内 销售 的 产品 必须 到 信息 产业 部 备案 登记 ,而 且 要 经 过 登记 测试 。 

(5) 自 2001 年 起 ,国家 质 检 总 局 和 信息 产业 部 每 年 都 通过 测试 对 软件 产品 进行 质量 监 
督 抽查 。 

(6) 国家 各 部 委 , 各 行业 正在 通过 测试 规范 行业 软件 的 健康 发 展 ,通过 测试 把 不 符合 行 
业 标 准 要 求 的 软件 挡 在 了 门 外 , 对 行业 信息 化 的 健康 发 展 起 到 了 很 好 的 促进 作用 。 

(7) 用 户 对 软件 质量 要 求 越 来 越 高 ,信息 系统 验收 不 再 走过场 ,而 要 通过 第 三 方 测试 机 
构 的 严格 测试 来 判定 。 

(8)“ 以 测 代 评 ” 正 在 成 为 我 国 科 技 项 目 择优 支持 的 一 项 重要 举措 。 例 如 ,国家 863 计 
划 对 数据 库 管 理 系统 .操作 系统 ,办公 软件 .ERP 等 项 目的 经 费 支持 ,都 是 通过 第 三 方 测试 
机 构 科 学 客观 的 测试 结果 来 决定 的 。 

(9) 软件 测试 正在 成 为 部 分 软件 学 院 的 一 门 独立 课程 ,对 我 国 软件 测试 人 才 的 培养 起 
到 了 很 好 的 作用 。 

(10) 第 三 方 测试 机 构 得 到 了 莲 勃 的 发 展 。 最近 几 年 ,在 全 国 各 地 ,新 成 立 了 多 家 软件 
测试 机 构 ,测试 服务 体系 已 经 基本 确立 。 

可 见 我 国 的 软件 测试 行业 正 处 于 一 个 快速 成 长 的 阶段 ,我 们 有 理由 相信 ,经 过 一 段 时 间 
的 发 展 ,我 们 会 逐步 缩小 与 国外 发 达 国 家 的 差距 ,从 而 带动 整个 软件 产业 的 健康 发 展 。 


(.3 软件 测试 的 概念 解析 


软件 测试 是 为 了 发 现 错误 而 执行 程序 的 过 程 。 或 者 说 ,软件 测试 是 根据 软件 开发 各 阶 
段 的 规格 说 明和 程序 内 部 结构 而 精心 设计 的 一 批 测试 用 例 ( 即 输入 数据 及 预期 的 输出 结 
果 ) ,并 利用 这 些 测 试用 例 去 运行 程序 ,以 发 现 程序 错误 的 过 程 。 


1. 软件 测试 的 定义 


测试 (Test) 最 早出 现 于 古 拉丁 字 , 它 有 *“ 镀 ”或 “容器 ”的 含义 。 在 工业 制造 和 生产 中 , 测 
试 被 当 作 一 个 常规 的 检验 产品 质量 的 生产 活动 。 测 试 的 含义 为 “以 检验 产品 是 否 满足 需求 
为 目标 ”。 而 软件 测试 活动 包括 很 重要 的 任务 , 即 发 现 错误 。 

“软件 测试 ?的 经 典 定义 是 在 规定 条 件 下 对 程序 进行 操作 ,以 发 现 错误 ,对 软件 质量 进行 
评估 。 

我 们 知道 ,软件 是 由 文档 、 数 据 以 及 程序 组 成 的 ,那么 软件 测试 就 应 该 是 对 软件 形成 过 
程 的 文档 ,数据 以 及 程序 进行 的 测试 ,而 不 仅 是 对 程序 进行 的 测试 。 

随 着 人 们 对 软件 工程 化 的 重视 以 及 软件 规模 的 日 益 扩大 ,软件 分 析 、 设 计 的 作用 越 来 越 
突出 。 因 此 ,做 好 软件 需求 和 设计 阶段 的 测试 工作 就 显得 非常 重要 。 这 就 是 我 们 提倡 的 测 
试 概念 扩大 化 ,提倡 软件 全 生命 周期 测试 的 理念 。 

软件 测试 就 是 在 软件 投入 运行 前 ,对 软件 需求 分 析 、 设 计 规格 说 明和 编码 的 最 终 复审 ， 
是 软件 质量 保证 的 关键 步骤 。 通 常 对 软件 测试 的 定义 有 如 下 描述 : 软件 测试 是 为 了 发 现 错 
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误 而 执行 程序 的 过 程 。 或 者 说 ,软件 测试 是 根据 软件 开发 各 阶段 的 规格 说 明和 程序 的 内 部 
结构 而 精心 设计 一 批 测试 用 例 , 并 利用 这 些 测 试用 例 去 运行 程序 ,以 发 现 程序 错误 的 过 程 。 

软件 测试 是 软件 工程 不 可 或 缺 的 重要 环节 和 重要 组 成 部 分 ,是 用 来 确认 一 个 程序 的 品 
质 或 性 能 是 否 符合 开发 之 前 所 提出 的 一 些 要求 。 软 件 测试 就 是 在 软件 投入 运行 前 ,对 软件 
需求 分 析 .设计 规格 说 明和 编码 的 最 终 复 审 , 是 软件 质量 保证 的 关键 步骤 与 重要 手段 。 软 件 
测试 的 定义 有 许多 种 ,其 中 比较 权威 的 是 国际 标准 IEEE 在 1983 年 提出 的 :“ 使 用 人 工 或 自 
动手 段 来 运行 或 测定 某 个 系统 的 过 程 , 其 目的 在 于 检验 它 是 否 满足 规定 的 需求 或 是 弄 清 预 
期 结果 与 实际 结果 之 间 的 差别 "”。 软 件 测试 是 为 了 发 现 错误 而 执行 程序 的 过 程 。 软 件 测试 
在 软件 生存 期 中 横 跨 两 个 阶段 : 通常 在 编写 出 每 一 个 模块 之 后 就 对 它 做 必要 的 测试 ( 称 为 
单元 测试 ) 。 编 码 和 单元 测试 属于 软件 生存 期 中 的 同一 个 阶段 。 在 结束 这 个 阶段 后 对 软件 
系统 还 要 进行 各 种 综合 测试 ,这 是 软件 生存 期 的 另 一 个 独立 阶段 , 即 测试 阶段 。 

针对 软件 的 应 用 不 同 、 规 模 不 同 、 运 行 平台 不 同 ,需要 选择 不 同 的 测试 策略 、 测 试 方法 ， 
制定 测试 计划 ,编写 测试 用 例 , 组 织 测试 活动 。 例 如 ,大 型 软件 往往 比 小 型 软件 需要 进行 更 
多 的 测试 ,并 需要 精心 制定 测试 计划 ,有 组 织 地 执行 测试 活动 ; 系统 软件 和 支撑 软件 往往 需 
要 具有 很 好 的 兼容 人 性、 准确 性 和 性 能 ,为 上 层 应 用 软件 提供 服务 ; 基于 Web 的 软件 ,往往 负 
载 能 力 成 为 决定 其 性 能 的 核心 指标 之 一 ; 而 嵌入 式 软件 ,需要 严格 控制 其 对 运算 能 力 和 存 
储 容量 的 需求 ,具有 和 较 高 的 性 能 。 


2. 软件 测试 的 目的 


正确 认识 测试 的 目的 是 十 分 重要 的 ,只 有 这 样 ,才能 设计 出 最 能 暴露 错误 的 测试 方案 。 
测试 的 目的 应 从 用 户 角 度 出 发 ,通过 软件 测试 暴露 软件 中 潜在 的 错误 和 缺陷 ,而 不 是 从 软件 
开发 者 的 角度 出 发 ,希望 测试 成 为 表明 软件 产品 不 存在 错误 ,验证 软件 已 正确 实现 用 户 的 要 
求 的 过 程 。 否 则 ,开发 者 测试 时 会 选择 不 易 测试 出 错误 和 缺陷 的 用 例 , 这 与 上 述 测 试 目 的 相 
违背 。 

软件 测试 的 目的 ,第 一 是 确认 软件 的 质量 ,其 一 方面 是 确认 软件 做 了 所 期 望 的 事情 (Do 
the right thing), 另 一 方面 是 确认 软件 以 正确 的 方式 做 了 这 个 事件 (Do it right), 

第 二 是 提供 信息 ,例如 提供 给 开发 人 员 或 开发 经 理 的 反馈 信息 ,为 风险 评估 所 准备 的 
信息 。 
第 三 ,软件 测试 不 仅 是 在 测试 软件 产品 的 本 身 ,而 且 还 包括 软件 开发 的 过 程 。 如 果 一 个 
软件 产品 开发 完成 之 后 发 现 了 很 多 问题 ,这 说 明 此 软件 开发 过 程 很 可 能 是 有 缺陷 的 。 因 此 
软件 测试 的 第 三 个 目的 是 保证 整个 软件 开发 过 程 是 高 质量 的 。 

基于 不 同 的 立场 ,存在 着 两 种 完全 不 同 的 测试 目的 。 从 用 户 的 角度 出 发 ,普遍 希望 通过 
软件 测试 暴露 软件 中 隐藏 的 错误 和 缺陷 ,以 考虑 是 否 可 以 接受 该 产品 。 从 软件 开发 者 的 角 
度 出 发 , 则 希望 成 为 表明 软件 产品 中 不 存在 错误 的 过 程 ,验证 该 软件 已 正确 地 实现 了 用 户 的 
要 求 , 确 立 人 们 对 软件 质量 的 信心 。 

测试 的 目标 是 能 够 以 耗费 最 少时 间 与 最 小 工作 量 找 出 软件 系统 中 潜在 的 各 种 错误 与 缺 
陷 。 另 外 ,我 们 应 该 认识 到 : 测试 只 能 证 明 程序 中 错误 的 存在 ,但 不 能 证 明 程 序 中 没有 错 
误 。 因 为 即使 实施 了 最 严格 的 测试 ,仍然 可 能 还 有 尚未 被 发 现 的 错误 或 缺陷 存在 于 程序 中 ， 
因而 测试 不 能 证 明 程 序 没有 错误 ,但 可 能 查 出 程序 中 的 错误 。 
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软件 测试 人 员 的 任务 很 清楚 ,就 是 站 在 使 用 者 的 角度 上 ,通过 不 断 地 使 用 和 攻击 刚 开发 
出 来 的 软件 产品 尽量 多 地 找 出 产品 存在 的 问题 ,也 就 是 我 们 所 称 的 Bug。 

综 上 所 述 ,软件 测试 的 目的 是 以 最 少 的 测试 用 例 集合 测 试 出 更 多 的 程序 中 潜在 错误 。 
如 何 测 试 得 彻底 ,怎样 设计 测试 用 例 是 测试 的 关键 技术 。 简 单 地 说 ,软件 测试 的 目的 就 是 通 
过 寻找 错误 , 尽 可 能 地 为 修正 错误 提供 更 多 的 信息 ,从 而 保证 软件 系统 的 可 用 性 。 


3. 软件 测试 的 基本 原则 


软件 测试 从 不 同 的 角度 出 发 会 派生 出 两 种 不 同 的 测试 原则 ,从 用 户 的 角度 出 发 ,就 是 和 希 
望 通过 软件 测试 能 充分 暴露 软件 中 存在 的 问题 和 缺陷 ,从 而 考虑 是 否 可 以 接受 该 产品 ; 从 
开发 者 的 角度 出 发 ,就 是 希望 测试 能 表明 软件 产品 不 存在 错误 ,已 经 正确 地 实现 了 用 户 的 需 
SR ,确立 人 们 对 软件 质量 的 信心 。 

人 们 为 了 提高 测试 的 效率 ,在 长 期 测试 实验 中 积累 了 不 少 经 验 ,下 面 列 出 了 人 们 在 实践 
中 总 结 的 主要 基本 原则 。 

CD 尽早 地 并 不 断 地 进行 软件 测试 。 实 际 问题 的 复杂 性 、 软 件 本 身 的 复杂 性 与 抽象 性 
以 及 开发 期 各 层 人 员工 作 的 配合 关系 等 各 种 错综复杂 的 因素 使 得 软件 开发 的 各 个 阶段 都 可 
能 存在 错误 及 潜在 的 缺陷 。 所 以 ,软件 开发 的 各 阶段 都 应 当 进 行 测试 。 错 误 发 现 得 越 早 ,后 
阶段 耗费 的 人 力 、 财 力 就 越 少 ,软件 质量 相对 就 高 一 些 。 

(2) 程序 员 或 程序 设计 机 构 应 避免 测试 自己 设计 的 程序 。 测 试 是 为 了 找 错 ,而 程序 员 
大 多 对 自己 所 编 的 程序 会 有 所 偏 祖 ,总 认为 自己 编 的 程序 问题 不 大 或 无 错误 存在 ,因此 很 难 
查 出 错误 。 此 外 ,设计 机 构 在 测试 自己 程序 时 ,由 于 开发 周期 和 经 费 等 问题 的 限制 ,要 采用 
客观 的 态度 是 十 分 困难 的 。 从 工作 效率 来 讲 ,最 好 由 与 原 程序 无 关 的 程序 员 和 程序 设计 机 
构 进 行 测试 。 

(3) 测试 用 例 中 不 仅 要 有 输入 数据 ,还 要 有 与 之 对 应 的 预期 结果 。 测 试 前 应 当 设 定 合 
理 的 测试 用 例 。 测 试用 例 不 仅 要 有 输入 数据 ,而 且 还 要 有 与 之 对 应 的 预期 结果 。 如 果 在 程 
序 执行 前 无 法 确定 预期 的 测试 结果 ,由 于 人 们 的 心理 作用 ,可 能 把 实际 上 是 错误 的 结果 当成 
是 正确 的 。 

(4) 测试 用 例 的 设计 不 仅 要 有 合法 的 输入 数据 ,还 要 有 非法 的 输入 数据 。 在 设计 测试 
用 例 时 ,不 仅 要 有 合法 的 输入 测试 用 例 ,还 要 有 非法 的 输入 测试 用 例 。 在 测试 程序 时 ,人 们 
常 忽视 不 合法 的 和 预想 不 到 的 输入 条 件 ,倾向 于 考虑 合法 的 和 预期 的 输入 条 件 。 而 在 软件 
的 实际 使 用 过 程 中 ,由 于 各 种 因素 的 存在 ,用 户 可 能 会 使 用 一 些 非法 的 输入 ,例如 常会 按 错 
键 或 使 用 不 合法 的 命令 。 对 于 一 个 功能 较 完 善 的 软件 来 说 ,不 仅 当 输入 是 合法 的 时 候 能 正 
确 运 行 ,而 且 当 有 非法 输入 时 ,也 应 当 能 对 非法 的 输入 拒绝 接受 ,同时 给 出 对 应 的 提示 信息 ， 
使 得 软件 便于 使 用 。 

(5) 在 对 程序 修改 之 后 要 进行 回归 测试 。 在 修改 程序 的 同时 时 常 又 会 引进 新 的 错误 ， 
因而 在 对 程序 修改 完 之 后 ,还 应 用 以 前 的 测试 用 例 进行 回归 测试 ,有 助 于 发 现 因 修改 程序 而 
引进 的 新 的 错误 。 

(6) 程序 中 尚未 发 现 的 错误 的 数量 通常 与 该 程序 中 已 发 现 的 错误 的 数量 成 正比 。 经 验 
表明 : 一 段 程序 中 若 发现 错 误 的 数目 越 多 , 则 此 段 程序 中 残存 的 错误 数目 也 较 多 。 例 如 ,在 
美国 的 IBM/370 的 一 个 操作 系统 中 ,47% 的 错误 (由 用 户 发 现 的 错误 ) 仅 与 该 系统 的 4% 的 
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程序 模块 有 关 。 据 此 规律 ,在 实际 测验 时 ,为 了 提高 测试 效率 ,要 花 较 多 的 时 间 和 代价 来 测 
试 那些 容易 出 错 即 出 错 多 的 程序 段 。 而 不 要 以 为 找到 了 几 个 错误 ,就 认为 问题 已 解决 ,不 再 
需要 继续 测试 了 。 

(7) 妥善 保留 测试 计划 、 全 部 测试 用 例 ` 出 错 统计 和 最 终 分 析 报 告 , 并 把 它们 作为 软件 
的 组 成 部 分 之 一 ,为 维护 提供 方便 。 设 计 测 试用 例 要 耗费 相当 大 的 工作 量 , 若 测试 完 随意 丢 
弃 , 以 后 一 旦 程序 改 错 后 需 重新 测试 时 ,将 重复 设计 测试 用 例 ,这 会 造成 很 大 的 浪费 ,因而 妥 
善 保留 与 测试 有 关 的 资料 ,能 为 后 期 的 维护 工作 带 来 方便 。 

(8) 应 当 对 每 一 个 测试 结果 做 全 面 检查 。 这 条 重要 的 原则 时 常 被 人 们 忽视 。 不 仔细 、 
全 面 地 检查 测试 结果 ,就 会 使 得 有 错误 征兆 的 输出 结果 漏 掉 。 

(9) 严格 执行 测试 计划 ,排除 测试 的 随意 性 。 测 试 计划 内 容 应 包括 : 所 测 软件 的 功能 ， 
输入 和 输出 ,测试 内 容 ,各 项 测试 的 进度 安排 ,资源 要 求 ,测试 资料 ,测试 工具 ,测试 用 例 的 选 
择 , 测 试 的 控制 方式 和 过 程 ,系统 组 装 方式 ,跟踪 规程 ,调试 规程 ,回归 测试 的 规定 以 及 评价 
标准 等 。 


4. 软件 测试 的 对 象 


根据 软件 定义 ,软件 包括 程序 .数据 和 文档 。 软 件 本 身 的 含义 对 软件 测试 的 指导 意义 在 
于 ,软件 测试 活动 不 应 只 局 限于 对 程序 的 测试 ,也 要 充分 考虑 软件 涉及 的 数据 和 描述 软件 的 
各 相关 文档 。 软 件 测试 并 不 等 于 程序 测试 。 软 件 测试 应 贯穿 于 整个 软件 生命 周期 中 。 在 整 
个 软件 生命 周期 中 ,各 阶段 有 不 同 的 测试 对 象 ,形成 了 不 同 开发 阶段 的 不 同类 型 的 测试 。 需 
求 分 析 、 概 要 设计 、 详 细 设 计 以 及 程序 编码 等 各 阶段 所 得 到 的 文档 ,包括 需求 规格 说 明 、 概 要 
设计 规格 说 明 .详细 设计 规格 说 明 以 及 源 程 序 ,都 应 成 为 软件 测试 "的 对 象 。 在 软件 编码 结 
束 后 ,对 编写 的 每 一 个 程序 模块 进行 测试 , 称 为 “模块 测试 ?或 “单元 测试 ”; 在 模块 集成 后 ， 
对 集成 在 一 起 的 模块 组 件 , 有 时 也 可 称 为 部件”, 进 行 测试 , 称 为 “集成 测试 ”; 在 集成 测试 
后 ,需要 检测 与 证 实 软件 是 否 满足 软件 需求 说 明 书 中 规定 的 要 求 , 这 就 称 为 “确认 测试 ”。 将 
整个 程序 模块 集成 为 软件 系统 ,安装 在 运行 环境 下 ,对 硬件 、 网 络 ,操作 系统 及 支撑 平台 构成 
的 整体 系统 进行 测试 , 称 为 “系统 测试 ”。 

为 了 把 握 各 个 环节 的 正确 性 ,人 们 需要 进行 各 种 验证 和 确认 (Verification ë. Validation) 
工作 。 
验证 (Verification) 是 保证 软件 正确 实现 特定 功能 的 一 系列 活动 和 过 程 ,目的 是 保证 软 
件 生命 周期 中 的 每 一 个 阶段 的 成 果 满 足 上 一 个 阶段 所 设 定 的 目标 。 

确认 (Validation) 是 保证 软件 满足 用 户 需 求 的 一 系列 的 活动 和 过 程 ,目的 是 在 软件 开发 
完成 后 保证 软件 与 用 户 需 求 相符 合 。 

验证 与 确认 都 属于 软件 测试 , 它 包 括 对 软件 分 析 、 设 计 以 及 程序 的 验证 和 确认 。 

在 对 需求 理解 与 表达 的 正确 性 .设计 与 表达 的 正确 性 、 实 现 的 正确 性 以 及 运行 的 正确 性 
的 验证 中 ,任何 一 个 环节 发 生 了 问题 都 可 能 在 软件 测试 中 表现 出 来 。 


5. 软件 测试 的 生命 周期 


图 1-2 给 出 了 软件 测试 生命 周期 的 模型 ,把 测试 的 生命 周期 分 为 几 个 阶段 。 前 三 个 阶 
段 是 引入 程序 错误 阶段 ,也 就 是 开发 过 程 中 的 需求 规格 说 明 、 设 计 、 编 码 阶段 ,此 时 极 易 引入 
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错误 或 者 导致 开发 过 程 中 其 他 阶段 产生 错误 。 然 后 是 通过 测试 发 现 错误 的 阶段 ,这 需要 通 
过 使 用 一 些 适 当 的 测试 技术 和 方法 来 共同 完成 。 后 三 个 阶段 是 清除 程序 错误 的 阶段 。 其 主 
要 任务 是 进行 缺陷 分 类 、 缺 陷 隔 离 和 解决 缺陷 。 其 中 在 修复 旧 缺 陷 的 时 候 很 可 能 引进 新 的 
错误 ,导致 原来 能 够 正确 执行 的 程序 出 现 新 的 缺陷 。 


错误 
! 错误 
heu] 
mu | 
w" 
"amus 
ma | " 
编码 < 一 
错误 | | 
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图 1-2 软件 测试 生命 周期 


在 软件 测试 生命 周期 的 每 个 阶段 都 要 完成 一 些 确定 的 任务 ,在 执行 每 个 阶段 的 任务 时 ， 
可 以 采用 行 之 有 效 的 结构 分 析 设 计 技术 和 适当 的 辅助 工具 ; 在 结束 每 个 阶段 的 任务 时 都 进 
行 严 格 的 技术 审查 和 管理 复审 。 最 后 提交 最 终 软件 配置 的 一 个 或 几 个 成 分 (文档 或 程序 ) 。 


6. 软件 测试 分 类 


按照 全 生命 周期 的 软件 测试 概念 ,测试 对 象 应 该 包括 软件 设计 开发 的 各 个 阶段 的 内 容 。 

1) 按照 开发 阶段 划分 

按照 开发 阶段 划分 软件 测试 可 分 为 单元 测试 .集成 测试 .确认 测试 .系统 测试 和 验收 
测试 。 

(1) 单元 测试 

单元 测试 又 称 模块 测试 ,是 针对 软件 设计 的 最 小 单位 一 一 程序 模块 进行 正确 性 检验 的 
测试 工作 。 其 目的 在 于 检查 每 个 程序 单元 能 否 正 确实 现 详细 设计 说 明 中 的 模块 功能 、 性 能 、 
接口 和 设计 约束 等 要 求 ,发现 各 模块 内 部 可 能 存在 的 各 种 错误 。 单 元 测试 需要 从 程序 的 内 
部 结构 出 发 设计 测试 用 例 。 多 个 模块 可 以 平行 地 独立 进行 单元 测试 。 

(2) 集成 测试 

集成 测试 也 叫 作 组 装 测试 。 通 常 在 单元 测试 的 基础 上 ,将 所 有 的 程序 模块 进行 有 序 的 、 
递增 的 测试 。 集 成 测试 是 检验 程序 单元 或 部 件 的 接口 关系 ,逐步 集成 为 符合 概要 设计 要 求 
的 程序 部 件 或 整个 系统 。 

软件 集成 的 过 程 是 一 个 持续 的 过 程 ,会 形成 很 多 个 临时 版 本 ,在 不 断 的 集成 过 程 中 , 功 
能 集成 的 稳定 性 是 真正 的 挑战 。 在 每 个 版 本 提交 时 ,都 需要 进行 冒 烟 测试 , 即 对 程序 主要 功 
能 进行 验证 。 冒 烟 测 试 也 叫 版 本 验证 测试 .提交 测试 。 

(3) 确认 测试 

确认 测试 是 通过 检验 和 提供 客观 证 据 , 证 实 软件 是 否 满足 特定 预期 用 途 的 需求 。 确 认 
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测试 是 检测 与 证 实 软 件 是 否 满足 软件 需求 说 明 书 中 规定 的 要 求 。 

(4) 系统 测试 

系统 测试 是 为 验证 和 确认 系统 是 否 达 到 其 原始 目标 ,而 对 集成 的 硬件 和 软件 系统 进行 
的 测试 。 系 统 测试 是 在 真实 或 模拟 系统 运行 的 环境 下 ,检查 完整 的 程序 系统 能 否 和 系统 ( 包 
括 硬件 .外 设 、 网 络 和 系统 软件 .支持 平台 等 ) 正 确 配 置 .连接 ,并 满足 用 户 需 求 。 

(5) 验收 测试 

按照 项 目 任 务 书 或 合同 、 供 需 双方 约定 的 验收 依据 文档 进行 的 对 整个 系统 的 测试 与 评 
审 ,决定 是 否 接 受 或 拒 收 系统 。 

2) 按照 测试 实施 组 织 划 分 

按照 测试 实施 组 织 划 分 ,软件 测试 可 分 为 开发 方 测试 .用 户 测试 、 第 三 方 测试 。 

(1) 开发 方 测试 

开发 方 测试 通常 也 叫 * 验 证 测试 "或 "a 测试 >。 开 发 方 通过 检测 和 提供 客观 证 据 , 证 实 
软件 的 实现 是 否 满足 规定 的 需求 。 验 证 测试 是 在 软件 开发 环境 下 ,由 开发 者 检测 与 证 实 软 
件 的 实现 是 否 满 足 软件 设计 说 明 或 软件 需求 说 明 的 要 求 。 主 要 是 指 在 软件 开发 完成 以 后 ， 
开发 方 对 要 提交 的 软件 进行 全 面 的 自我 检查 与 验证 ,可 以 和 软件 的 “系统 测试 ”一 并 进行 。 

(2) 用 户 测试 

在 用 户 的 应 用 环境 下 ,用户 通 过 运行 和 使 用 软件 ,检测 与 核实 软件 实现 是 否 符合 自己 预 
期 的 要 求 。 通 常情 况 用 户 测试 不 是 指 用 户 的 “验收 测试 ”, 而 是 指 用 户 的 使 用 性 测试 ,由 用 户 
找 出 软件 的 应 用 过 程 中 发 现 的 软件 的 缺陷 与 问题 ,并 对 使 用 质量 进行 评价 。 

8 测试 通常 被 看 成 是 一 种 “用户 测试 "。B 测试 主要 是 把 软件 产品 有 计划 地 免费 分 发 到 
目标 市 场 ,让 用 户 大 量 使 用 ,并 评价 ,检查 软件 。 通 过 用 户 各 种 方式 的 大 量 使 用 ,来 发 现 软 件 
存在 的 问题 与 错误 ,把 信息 反馈 给 开发 者 修改 。B 测试 中 厂商 获取 的 信息 ,可 以 有 助 于 软件 
产品 的 成 功 发 布 。 

(3) 第 三 方 测试 

介 于 软件 开发 方 和 用 户 方 之 间 的 测试 组 织 的 测试 。 第 三 方 测试 也 称 为 独立 测试 。 软 件 
质量 工程 强调 开展 独立 验证 和 确认 (IV&V) 活 动 。IV&V 是 由 在 技术 、 管 理 和 财务 上 与 开 
发 组 织 具有 规定 程度 独立 的 组 织 执行 验证 和 确认 过 程 。 软 件 第 三 方 测试 也 就 是 由 在 技术 、 
管理 和 财务 上 与 开发 方 和 用 户 方 相对 独立 的 组 织 进行 的 软件 测试 。 一 般 情 况 下 是 在 模拟 用 
户 真实 应 用 环境 下 ,进行 软件 确认 测试 。 

3) 按照 测试 技术 划分 

按照 测试 技术 可 分 为 白 盒 测 试 . 黑 盒 测试 . 灰 盒 测试 ,也 可 分 为 静态 测试 和 动态 测试 。 
静态 测试 是 指 不 运行 程序 ,通过 人 工 对 程序 和 文档 进行 分 析 与 检查 ; 静态 测试 技术 又 称 为 
静态 分 析 技 术 ,静态 测试 实际 上 是 对 软件 中 的 需求 说 明 书 、 设 计 说 明 书 、 程 序 源 代码 等 进行 
非 运行 的 检查 ,静态 测试 包括 走 查 、 符 号 执行 、 需 求 确认 等 。 动 态 测试 是 指 通过 人 工 或 使 用 
工具 运行 程序 进行 检查 、 分 析 程序 的 执行 状态 和 程序 的 外 部 表现 。 这 里 讨论 的 白 盒 测试 . 黑 
盒 测 试 , 灰 盒 测试 ,在 实现 测试 方法 上 既 包括 动态 测试 也 包括 静态 测试 。 

(1) 白 盒 测试 

通过 对 程序 内 部 结构 的 分 析 、 检 测 来 寻找 问题 。 白 盒 测试 可 以 把 程序 看 成 装 在 一 个 透 
明 的 白 盒子 里 ,也 就 是 清楚 了 解 程序 结构 和 处 理 过 程 , 检 查 是 否 所 有 的 结构 及 路 径 都 是 正确 
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的 ,检查 软件 内 部 动作 是 否 按照 设计 说 明 的 规定 正常 进行 。 白 盒 测 试 又 称 结构 测试 。 

(2) 黑 盒 测试 

通过 软件 的 外 部 表现 来 发 现 其 缺陷 和 错误 。 黑 盒 测试 法 把 测试 对 象 看 成 一 个 黑 盒 子 ， 
完全 不 考虑 程序 内 部 结构 和 处 理 过 程 。 黑 盒 测试 是 在 程序 界面 处 进行 测试 , 它 只 是 检查 程 
序 是 否 按照 需求 规格 说 明 书 的 规定 正常 实现 。 

(3) 灰 盒 测试 

介 于 白 盒 测试 和 黑 盒 测试 之 间 的 测试 。 灰 盒 测试 关注 输出 对 于 输入 的 正确 性 ; 同时 也 
关注 内 部 表现 ,但 这 种 关注 不 像 白 盒 测试 那样 详细 、 完 整 ,只 是 通过 一 些 表征 性 的 现象 、 事 
件 、 标 志 来 判断 内 部 的 运行 状态 。 

灰 盒 测试 结合 了 白 盒 测试 和 黑 盒 测 试 的 要 素 。 它 考虑 了 用 户 端 ,特定 的 系统 知识 和 操 
作 环 境 。 它 在 系统 组 件 的 协同 性 环境 中 评价 应 用 软件 的 设计 。 

软件 测试 方法 和 技术 的 分 类 与 软件 开发 过 程 相 关联 , 它 贯 穿 了 整个 软件 生命 周期 。 走 
查 .单元 测试 .集成 测试 ,系统 测试 用 于 整个 开发 过 程 中 的 不 同 阶段 。 开 发 文档 和 源 程序 可 
以 应 用 单元 测试 应 用 走 查 的 方法 ; 单元 测试 可 应 用 白 盒 测试 方法 ; 集成 测试 应 用 近似 灰 盒 
测试 方法 ; 而 系统 测试 和 确认 测试 应 用 黑 盒 测试 方法 。 


人 4 软件 测试 的 过 程 


软件 测试 一 般 按 4 个 步骤 进行 , 即 单 元 测试 、 集 成 测试 .确认 测试 和 系统 测试 。 图 1-3 
显示 出 软件 测试 经 历 的 4 个 步骤 。 单 元 测试 集中 对 用 源 代 码 实 现 的 每 一 个 程序 单元 进行 测 
试 ,检查 各 个 程序 模块 是 否 正确 地 实现 了 规定 的 功能 。 然 后 ,进行 集成 测试 ,根据 设计 规定 
的 软件 体系 结构 ,把 已 测试 过 的 模块 组 装 起 来 ,在 组 装 过 程 中 ,检查 程序 结构 组 装 的 正确 性 。 
确认 测试 则 是 要 检查 已 实现 的 软件 是 否 满足 了 需求 规格 说 明 中 确定 的 各 种 需求 ,以 及 软件 
配置 是 否 完全 正确。 最 后 是 系统 测试 ,把 已 经 经 过 确认 的 软件 纳入 实际 运行 环境 中 ,与 其 
他 系统 成 分 组 合 在 一 起 进行 测试 。 严 格 地 说 ,系统 测试 已 超出 了 软件 工程 的 范围 。 
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图 1-3 软件 测试 经 历 的 步骤 


1. 单元 测试 


单元 测试 是 针对 程序 模块 进行 正确 性 检验 的 测试 。 其 目的 在 于 发 现 各 模块 内 部 可 能 存 
在 的 各 种 差错 。 单 元 测试 需要 从 程序 的 内 部 结构 出 发 设计 测试 用 例 。 多 个 模块 可 以 平行 地 
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独立 进行 单元 测试 。 

1) 单元 测试 的 内 容 

(1) 模块 接口 测试 : 对 通过 被 测 模块 的 数据 流 进行 测试 。 为 此 ,对 模块 接口 ,包括 参数 
表 、 调 用 子 模块 的 参数 ,全 程 数 据 、 文 件 输入 输出 操作 都 必须 检查 。 

(2) 局 部 数据 结构 测试 : 设计 测试 用 例 检 查 数据 类 型 说 明 、 初 始 化 ,默认 值 等 方面 的 问 
题 , 还 要 查 清 全 程 数据 对 模块 的 影响 。 

(3) 路 径 测 试 : 选择 适当 的 测试 用 例 ,对 模块 中 重要 的 执行 路 径 进 行 测 试 。 对 基本 执 
行路 径 和 循环 进行 测试 可 以 发 现 大 量 的 路 径 错误 。 

OD 错误 处 理 测试 : 检查 模块 的 错误 处 理 功能 是 否 包含 错误 或 缺陷 。 例 如 ,是 否 拒绝 
不 合理 的 输入 ; 出 错 的 描述 是 否 难 以 理解 ,是否 对 错误 定位 有 误 ,是 否 出 错 原因 报告 有 误 、 
是 否 对 错误 条 件 的 处 理 不 正确 ; 在 对 错误 处 理 之 前 错误 条 件 是 否 已 经 引起 系统 的 干预 等 。 

(5) 边界 测试 : 要 特别 注意 数据 流 、 控 制 流 中 刚好 等 于 、 大 于 或 小 于 确定 的 比较 值 时 出 
错 的 可 能 性 。 对 这 些 地 方 要 仔细 地 选择 测试 用 例 , 认 真 加 以 测试 。 

此 外 ,如 果 对 模块 运行 时 间 有 要 求 , 还 要 专门 进行 关键 路 径 测试 ,以 确定 最 坏 情况 下 和 
平均 意义 下 影响 模块 运行 时 间 的 因素 。 这 类 信息 对 进行 性 能 评价 是 十 分 有 用 的 。 

2) 单元 测试 的 步骤 

通常 单元 测试 在 编码 阶段 进行 。 在 源 程序 代码 编制 完成 ,经 过 评审 和 验证 ,确认 没有 语 
法 错误 之 后 ,就 开始 进行 单元 测试 的 测试 用 例 设计 。 利 用 设计 文档 ,设计 可 以 验证 程序 功 
能 、 找 出 程序 错误 的 多 个 测试 用 例 。 对 于 每 一 组 输入 ,应 有 预期 的 正确 结果 。 

模块 并 不 是 一 个 独立 的 程序 ,在 考虑 测试 模块 时 ,同时 要 考虑 它 和 外 界 的 联系 ,用 一 些 
辅助 模块 去 模拟 与 被 测 模块 相 联 系 的 其 他 模块 。 这 些 辅助 模块 分 为 以 下 两 种 。 

CD 驱动 模块 : 相当 于 被 测 模块 的 主 程序 。 它 接收 测试 数据 ,把 这 些 数据 传送 给 被 测 
模块 ,最 后 输出 实测 结果 。 

(2) 桩 模块 : 用 于 代替 被 测 模块 调用 的 子 模块 。 桩 模块 可 以 做 少量 的 数据 操作 ,不 需 
要 把 子 模块 所 有 功能 都 带 进来 ,但 不 允许 什么 事情 也 不 做 。 

被 测 模块 ,与 它 相关 的 驱动 模块 及 桩 模块 共同 构成 了 一 个 “测试 环境 ”, 见 图 1-4。 


— io 测试 结 
被 测 模块 


mue | [ mes BEDA 


图 1-4 单元 测试 的 步骤 


如 果 一 个 模块 要 完成 多 种 功能 ,上 且 以 程序 包 或 对 象 类 的 形式 出 现 ,例如 Ada 中 的 包 ， 
MODULA 中 的 模块 ,C++ 中 的 类 。 这 时 可 以 将 这 个 模块 看 成 由 几 个 小 程序 组 成 。 对 其 中 
的 每 个 小 程序 先进 行 单元 测试 要 做 的 工作 ,对 关键 模块 还 要 做 性 能 测试 。 对 支持 某 些 标准 
规程 的 程序 ,更 要 着 手 进行 互 连 测试 。 有 人 把 这 种 情况 特别 称 为 模块 测试 ,以 区 别 单元 
测试 。 
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2. 集成 测试 


在 单元 测试 的 基础 上 ,需要 将 所 有 模块 按照 设计 要 求 组 装 成 系统 。 这 时 需要 考虑 : 

CD 在 把 各 个 模块 连接 起 来 的 时 候 , 穿 越 模块 接口 的 数据 是 否 会 丢失 ; 

(2) 一 个 模块 的 功能 是 否 会 对 另 一 个 模块 的 功能 产生 不 利 的 影响 ; 

(3) 各 个 子 功能 组 合 起 来 ,能 和 否 达 到 预期 要 求 的 父 功能 ， 

(4) 全 局 数据 结构 是 否 有 问题 ; 

(5) 单个 模块 的 误差 累积 起 来 ,是 否 会 放大 ,从 而 达到 不 能 接受 的 程度 ; 

(6) 单个 模块 的 错误 是 否 会 导致 数据 库 错 误 。 

选择 什么 方式 把 模块 组 装 起 来 形成 一 个 可 运行 的 系统 ,直接 影响 到 模块 测试 用 例 的 形 
式 、 所 用 测试 工具 的 类 型 .模块 编号 的 次 序 和 测试 的 次 序 , 以 及 生成 测试 用 例 的 费用 和 调试 
的 费用 。 通 常 , 把 模块 组 装 成 系统 的 方式 有 以 下 两 种 。 

1) 一 次 性 集成 方式 

它 是 一 种 非 增殖 式 集成 方式 ,也 叫 作 整体 拼装 。 使 用 这 种 方式 ,首先 对 每 个 模块 分 别 进 
行 模块 测试 ,然后 再 把 所 有 模块 组 装 在 一 起 进行 测试 ,最 终 得 到 要 求 的 软件 系统 。 

由 于 程序 中 不 可 避免 地 存在 涉及 模块 间接 口 ,全 局 数据 结构 等 方面 的 问题 ,所 以 一 次 试 
运行 成 功 的 可 能 性 并 不 很 大 。 

2) 增殖 式 集成 方式 

它 又 称 渐 增 式 集 成 方式 。 首 先 对 一 个 个 模块 进行 模块 测试 ,然后 将 这 些 模块 逐步 组 装 
成 较 大 的 系统 ,在 组 装 的 过 程 中 边 连接 边 测试 ,以 发 现 连接 过 程 中 产生 的 问题 。 最 后 通过 增 
殖 逐 步 组 装 成 为 要 求 的 软件 系统 。 

CD 自 顶 向 下 的 增殖 方式 : 将 模块 按 系统 程序 结构 , 沿 控制 层次 自 顶 向 下 进行 集成 。 
由 于 这 种 增殖 方式 在 测试 过 程 中 较 早 地 验证 了 主要 的 控制 和 判断 点 ,在 一 个 功能 划分 合理 
的 程序 结构 中 ,判断 常 出 现在 较 高 的 层次 , 较 早 就 能 遇 到 。 如 果 主 要 控制 有 问题 ,尽早 发 现 
它 能 够 减少 以 后 的 返工 。 

(2) 自 底 向 上 的 增殖 方式 : 从 程序 结构 的 最 底层 模块 开始 组 装 和 测试 。 因 为 模块 是 自 
底 向 上 进行 组 装 , 对 于 一 个 给 定 层次 的 模块 , 它 的 子 模块 (包括 子 模块 的 所 有 下 属 模块 ) 已 经 
组 装 并 测试 完成 ,所 以 不 再 需要 桩 模块 。 在 模块 的 测试 过 程 中 需要 从 子 模块 得 到 的 信息 可 
以 直接 运行 子 模块 得 到 。 

(3) 混合 增殖 式 测试 : 自 顶 向 下 增殖 的 方式 和 自 底 向 上 增殖 的 方式 各 有 优 缺 点 。 自 项 
向 下 增殖 方式 的 缺点 是 需要 建立 桩 模块 。 要 使 桩 模块 能 够 模拟 实际 子 模块 的 功能 是 十 分 困 
难 的 。 同 时 涉及 复杂 算法 和 真正 输入 输出 的 模块 一 般 在 底层 ,它们 是 最 容易 出 问题 的 模块 ， 
到 组 装 和 测试 的 后 期 才 遇 到 这 些 模块 ,一 旦 发 现 问 题 ,导致 过 多 的 回归 测试 。 而 自 顶 向 下 增 
殖 方式 的 优点 是 能 够 较 早 地 发 现在 主要 控制 方面 的 问题 。 自 底 向 上 增殖 方式 的 缺点 是 “ 程 
序 一 直 未 能 作为 一 个 实体 存在 ,直到 最 后 一 个 模块 加 上 去 后 才 形 成 一 个 实体 ”。 就 是 说 ,在 
自 底 向 上 组 装 和 测试 的 过 程 中 ,对 主要 的 控制 直到 最 后 才 接 触 到 。 但 这 种 方式 的 优点 是 不 
需要 桩 模块 ,而 建立 驱动 模块 一 般 比 建立 桩 模块 容易 ,同时 由 于 涉及 复杂 算法 和 真正 输入 输 
出 的 模块 最 先 得 到 组 装 和 测试 ,可 以 把 最 容易 出 问题 的 部 分 在 早期 解决 。 此 外 , 自 底 向 上 增 
殖 的 方式 可 以 实施 多 个 模块 的 并 行 测试 。 
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有 鉴于 此 ,通常 是 把 以 上 两 种 方式 结合 起 来 进行 组 装 和 测试 。 

(1) 衍 变 的 自 顶 向 下 的 增殖 测试 : 它 的 基本 思想 是 强化 对 输入 输出 模块 和 引入 新 算法 
模块 的 测试 ,并 自 底 向 上 组 装 成 为 功能 相当 完整 量 相 对 独立 的 子 系统 ,然后 由 主 模块 开始 自 
顶 向 下 进行 增殖 测试 。 

(2) 自 底 向 上 - 自 项 向 下 的 增殖 测试 : 它 首先 对 含 读 操作 的 子 系统 自 底 向 上 直至 根 结 点 
模块 进行 组 装 和 测试 ,然后 对 含 写 操作 的 子 系统 做 自 顶 向 下 的 组 装 与 测试 。 

(3) 回归 测试 : 这 种 方式 采取 自 项 向 下 的 方式 测试 被 修改 的 模块 及 其 子 模块 ,然后 将 
这 一 部 分 视 为 子 系统 ,再 自 底 向 上 测试 ,以 检查 该 子 系统 与 其 上 级 模块 的 接口 是 否 适 配 。 


3. 确认 测试 


确认 测试 又 称 有 效 性 测试 。 它 的 任务 是 验证 软件 的 有 效 性 , 即 验证 软件 的 功能 和 性 能 
及 其 他 特性 是 否 与 用 户 的 要 求 一 致 。 在 软件 需求 规格 说 明 书 中 描述 了 全 部 用 户 可 见 的 软件 
属性 ,其 中 有 一 节 叫 作 有 效 性 准则 , 它 包 含 的 信息 就 是 软件 确认 测试 的 基础 。 

在 确认 测试 阶段 需要 做 的 工作 如 图 1-5 所 示 。 首 先 要 进行 有 效 性 测试 以 及 软件 配置 复 
审 , 然 后 进行 验收 测试 和 安装 测试 ,在 通过 了 专家 鉴定 之 后 ,才能 成 为 可 交付 的 软件 。 


选择 测试 人 员 


构造 测试 用 例 


实际 运行 测试 ZHP 


软件 计划 运行 维护 


用 户 文档 


软件 配置 


开发 文档 


源 程序 文本 


支持 环境 


图 1-5 确认 测试 需 做 的 工作 


1) 进行 有 效 性 测试 (功能 测试 ) 

有 效 性 测试 是 在 模拟 的 环境 (可 能 就 是 开发 的 环境 ) 下 ,运用 黑 盒 测 试 的 方法 ,验证 被 测 
软件 是 否 满 足 需求 规格 说 明 书 列 出 的 需求 。 为 此 ,需要 首先 制定 测试 计划 ,规定 要 做 测试 的 
种 类 。 还 需要 制定 一 组 测试 步骤 ,描述 具体 的 测试 用 例 。 通 过 实施 预定 的 测试 计划 和 测试 
步骤 ,确定 软件 的 特性 是 否 与 需求 相符 ,确保 所 有 的 软件 功能 需求 都 能 得 到 满足 ,所 有 的 软 
件 性 能 需求 都 能 达到 ,所 有 的 文档 都 是 正确 且 便于 使 用 。 同 时 ,对 其 他 软件 需求 ,例如 可 移 
植 性 ,兼容 性 .出错 自 动 恢复 .可 维护 性 等 ,也 都 要 进行 测试 ,确认 是 否 满足 。 

2) 软件 配置 复查 

软件 配置 复查 的 目的 是 保证 软件 配置 的 所 有 成 分 都 齐全 ,各 方面 的 质量 都 符合 要 求 , 具 
有 维护 阶段 所 必需 的 细节 ,而 且 已 经 编排 好 分 类 的 目录 。 
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除了 按 合同 规定 的 内 容 和 要 求 ,由 人 工 审查 软件 配置 之 外 ,在 确认 测试 的 过 程 中 ,应 当 
严格 遵守 用 户 手册 和 操作 手册 中 规定 的 使 用 步骤 ,以 便 检 查 这 些 文档 资料 的 完整 性 和 正确 
人 性。 必须 仔细 记录 发 现 的 遗漏 和 错误 ,并 且 适 当地 补充 和 改正 。 

3) 验收 测试 

在 通过 了 系统 的 有 效 性 测试 及 软件 配置 审查 之 后 ,就 应 开始 系统 的 验收 测试 。 验 收 测 
试 是 以 用 户 为 主 的 测试 。 软 件 开发 人 员 和 QA( 质 量 保证 ) 人 员 也 应 参加 。 由 用 户 参 加 设计 
测试 用 例 ,使 用 用 户 界面 输入 测试 数据 ,并 分 析 测试 的 输出 结果 。 一 般 使 用 生产 中 的 实际 数 
据 进行 测试 。 在 测试 过 程 中 ,除了 考虑 软件 的 功能 和 性 能 外 ,还 应 对 软件 的 可 移植 性 ,兼容 
性 ,可 维护 性 、 错 误 的 恢复 功能 等 进行 确认 。 

4) a 测试 和 8B 测试 

在 软件 交付 使 用 之 后 ,用 户 将 如 何 实际 使 用 程序 ,对 于 开发 者 来 说 是 无 法 预测 的 。 因 为 
用 户 在 使 用 过 程 中 常常 会 发 生 对 使 用 方法 的 误解 .异常 的 数据 组 合 ,以 及 产生 对 某 些 用 户 来 
说 似乎 是 清晰 的 但 对 另 一 些 用 户 来 说 却 难以 理解 的 输出 等 。 

如 果 软 件 是 为 多 个 用 户 开发 的 产品 的 时 候 , 让 每 个 用 户 逐 个 执行 正式 的 验收 测试 是 不 
切实 际 的 。 很 多 软件 产品 生产 者 采用 一 种 称 为 a 测试 和 8B 测试 的 测试 方法 ,以 发 现 可 能 只 
有 最 终 用 户 才 能 发 现 的 错误 。 

a 测试 是 由 一 个 用 户 在 开发 环境 下 进行 的 测试 ,也 可 以 是 公司 内 部 的 用 户 在 模拟 实际 
操作 环境 下 进行 的 测试 。 这 是 在 受 控制 的 环境 下 进行 的 测试 。a 测试 的 目的 是 评价 软件 产 
品 的 FURPS( 即 功能 、 可 使 用 性 、 可 靠 性 、 性 能 和 支持 )。 尤 其 注重 产品 的 界面 和 特色 。a WU 
试 人 员 是 除 产 品 开发 人 员 之 外 首先 见 到 产品 的 人 ,他 们 提出 的 功能 和 修改 意见 是 特别 有 价 
值 的 。a 测试 可 以 从 软件 产品 编码 结束 之 时 开始 ,或 在 模块 ( 子 系统 ) 测 试 完 成 之 后 开始 ,也 
可 以 在 确认 测试 过 程 中 产品 达到 一 定 的 稳定 和 可 靠 程度 之 后 再 开始 。 有 关 的 手册 (草稿 ) 等 
应 事先 准备 好 。 

B 测 试 是 由 软件 的 多 个 用 户 在 一 个 或 多 个 用 户 的 实际 使 用 环境 下 进行 的 测试 。 与 a 测 
试 不 同 的 是 ,开发 者 通常 不 在 测试 现场 。 因 而 ,B 测 试 是 在 开发 者 无 法 控制 的 环境 下 进行 的 
软件 现场 应 用 。 在 B 测试 中 ,由 用 户 记 下 遇 到 的 所 有 问题 ,包括 真实 的 以 及 主观 认定 的 , 定 
期 向 开发 者 报告 ,开发 者 在 综合 用 户 的 报告 之 后 ,做 出 修改 ,最 后 将 软件 产品 交付 给 全 体 用 
户 使 用 。B 测试 主要 衡量 产品 的 FURPS。 着 重 于 产品 的 支持 性 ,包括 文档 、 客 户 培训 和 支 
持 产品 生产 能 力 。 只 有 当 a 测试 达到 一 定 的 可 靠 程度 时 ,才能 开始 p 测试 。 由 于 它 处 在 整 
个 测试 的 最 后 阶段 ,不 能 指望 这 时 发 现 主要 问题 。 同 时 ,产品 的 所 有 手册 文本 也 应 该 在 此 阶 
段 完 全 定稿 。 由 于 B 测试 的 主要 目标 是 测试 可 支持 性 ,所 以 B 测试 应 尽 可 能 由 主持 产品 发 
行 的 人 员 来 管理 。 


4. 系统 测试 


所 谓 系统 测试 ,是 将 通过 确认 测试 的 软件 ,作为 整个 基于 计算 机 系统 的 一 个 元 素 , 与 计 
算 机 硬件 .外 设 、 某 些 支持 软件 .数据 和 人 员 等 其 他 系统 元 素 结合 在 一 起 ,在 实际 运行 (使 用 ) 
环境 下 ,对 计算 机 系统 进行 一 系列 的 组 装 测试 和 确认 测试 。 

系统 测试 的 目的 在 于 通过 与 系统 的 需求 定义 做 比较 ,发 现 软件 与 系统 定义 不 符合 或 与 
之 矛盾 的 地 方 。 系 统 测试 的 测试 用 例 应 根据 需求 分 析 规 格 说 明 来 设计 ,并 在 实际 使 用 环境 
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下 运行 。 

每 个 具体 测试 的 过 程 有 三 类 输入 : 软件 配置 、 测 试 配置 和 测试 工具 。 软 件 配置 包括 软 
件 需 求 说 明 书 、 设 计 说 明 书 、 源 程序 清单 等 文档 。 测 试 配置 包括 测试 方案 测试 计划 测试 用 
例 、 测 试 驱动 程序 等 文档 。 测 试 工 具 包 括 支持 测试 的 软件 。 输 出 信息 有 修正 软件 的 文件 和 
预测 可 靠 性 或 得 出 纠 错 后 可 交付 使 用 的 正确 软件 。 测 试 的 信息 流 是 不 断 递归 的 过 程 ,也 是 
相对 有 限 的 测试 过 程 ,而 不 是 无 限 的 过 程 。 软 件 测试 的 过 程 如 图 1-6 所 示 。 


软件 配置 i MER [ 错误 T 3; 修正 文件 
测试 配置 正确 
测试 工具 测试 结果 预测 评价 “| 出 错 率 调试 

4 

构造 可 靠 | 预测 可 靠 性 

性 模型 

图 1-6 测试 的 过 程 
测试 过 程 说 明 如 下 。 


(1) 软件 配置 : 指 被 测试 软件 的 文件 ,如 软件 需求 规格 说 明 书 、 软 件 设计 说 明 书 和 源 程 
序 清单 等 文档 。 

(2) 测试 配置 : 指 测试 方案 ,测试 计划 、 测 试用 例 \ 测 试 驱动 程序 等 文档 。 实 际 上 ,在 整 
个 软件 工程 过 程 中 ,测试 配置 只 是 软件 配置 的 一 个 子 集 。 

(3) 测试 工具 : 是 为 了 提高 测试 效率 而 设计 的 支持 软件 测试 的 软件 。 例 如 ,测试 数据 
自动 生成 程序 .静态 分 析 程序 动态 分 析 程 序 、 测 试 结果 分 析 程 序 以 及 驱动 测试 的 测试 数据 

(A) 测试 评价 : 由 测试 出 的 错误 迹象 ,分 析 、 找 出 错误 的 原因 和 位 置 ,以 便 纠正 和 积累 
软件 设计 的 经 验 。 

(5) 纠 错 (调试 ): 是 指 找到 出 错 的 原因 与 位 置 并 纠 错 ,包括 修正 文件 直到 软件 正确 为 
止 。 纠 错过 程 是 测试 过 程 中 最 无 法 预料 的 部 分 。 为 了 诊断 和 纠正 一 个 错误 ,可 能 需要 一 小 
时 、 一 天 、 甚 至 几 个 月 的 时 间 。 正 是 因为 纠 错 本 身 所 具有 的 不 确定 性 ,常常 难以 准确 地 安排 
测试 日 程 表 。 

(6) 可 靠 性 模型 : 通过 对 测试 出 的 软件 出 错 率 的 分 析 ,建立 模型 ,得 出 可 靠 的 数据 , 指 
导 软 件 的 设计 与 维护 。 对 测试 结果 进行 收集 和 评价 后 ,软件 可 靠 性 能 够 达到 的 质量 指标 也 
就 清楚 了 。 若 出 现 一 些 有 规律 的 .严重 的 、 要 求 修改 设计 的 错误 ,软件 的 质量 和 可 靠 性 值得 
怀疑 ,应 做 进一步 测试 。 另 外 , 若 软 件 功 能 看 来 完成 得 很 好 且 遇 到 错误 也 容易 纠正 ,从 而 可 
以 得 到 两 种 不 同 的 结论 : 一 种 是 软件 质量 和 可 靠 性 是 可 以 接受 的 ; 另 一 种 是 所 进行 的 测试 
尚 不 足以 发 现 严重 的 错误 。 若 没有 发 现任 何 错误 ,可 能 是 由 于 测试 配置 不 够 周到 ,依然 有 洲 
在 的 错误 存在 。 若 将 错误 放 过 ,在 维护 阶段 被 用 户 发 现时 再 纠正 ,所 需 费 用 将 可 能 是 开发 阶 
段 的 40—60 fi. 
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软件 测试 是 一 个 极为 复杂 的 过 程 。 一 个 规范 化 的 软件 测试 过 程 通常 需 包括 以 下 基本 的 
测试 活动 。 

CD 拟定 软件 测试 计划 ; 

(2) 编制 软件 测试 大 纲 ; 

(3) 设计 和 生成 测试 用 例 ; 

(4) 实施 测试 ; 

(5) 生成 软件 测试 报告 。 

实际 上 ,软件 测试 过 程 与 整个 软件 开发 过 程 基本 上 是 平行 进行 的 。 测 试 计划 早 在 需求 
分 析 阶 段 就 已 经 开始 制定 ,其 他 相关 工作 ,包括 测试 大 纲 的 制定 、 测 试 数据 的 生成 ,测试 工具 
的 选择 和 开发 等 也 应 在 测试 阶段 之 前 进行 。 充 分 的 准备 工作 可 以 有 效 地 克服 测试 的 盲目 
性 ,缩短 测试 周期 ,提高 测试 效率 ,并 且 起 到 测试 文档 与 开发 文档 互 查 的 作用 。 

此 外 ,软件 测试 的 实施 阶段 是 由 一 系列 的 测试 周期 (Test Cycle) 组 成 的 。 在 每 个 测试 
周期 中 ,软件 测试 工程 师 将 依据 预先 编制 好 的 测试 大 纲 和 准备 好 的 测试 用 例 ,对 被 测 软件 进 
行 完整 的 测试 。 测 试 与 纠 错 通常 是 反复 交 蔡 进行 的 。 当 使 用 专业 测试 人 员 时 ,测试 与 纠 错 
甚至 是 平行 进行 的 ,从 而 压缩 总 的 开发 时 间 。 更 重要 的 是 ,由 于 专业 测试 人 员 丰 富 的 测试 经 
验 、 所 采用 的 系统 化 的 测试 方法 、 全 时 的 投入 ,特别 是 独立 于 开发 人 员 的 思维 ,使 得 他 们 能 够 
更 有 效 地 发 现 许多 单 靠 开发 人 员 很 难 发 现 的 错误 和 问题 。 

软件 测试 大 纲 是 软件 测试 的 依据 。 它 明确 详尽 地 规定 了 在 测试 中 针对 系统 的 每 一 项 功 
能 或 特性 所 必须 完成 的 基本 测试 项 目 和 测试 完成 的 标准 。 无 论 是 自动 测试 还 是 手动 测试 ， 
都 必须 满足 测试 大 纲 的 要 求 。 

一 般 而 言 ,测试 用 例 是 指 为 实施 一 次 测试 而 向 被 测 系统 提供 的 输入 数据 .操作 或 各 种 环 
境 设 置 。 测 试用 例 控 制 着 软件 测试 的 执行 过 程 , 它 是 对 测试 大 纲 中 每 个 测试 项 目的 进一步 
实例 化 。 已 有 许多 著名 的 论著 总 结 了 设计 测试 用 例 的 各 种 规则 和 策略 。 从 工程 实践 的 角度 
讲 有 以 下 几 条 基本 准则 。 

CD 测试 用 例 的 代表 性 : 能 够 代表 各 种 合理 和 不 合理 的 、 合 法 的 和 非法 的 ,边界 和 越界 
的 ,以 及 极限 的 输入 数据 .操作 和 环境 设置 等 。 

(2) 测试 结果 的 可 判定 性 : 即 测试 执行 结果 的 正确 性 是 可 判定 的 或 可 评估 的 。 

(3) 测试 结果 的 可 再 现 性 : 即 对 同样 的 测试 用 例 ,系统 的 执行 结果 应 当 是 相同 的 。 

一 般 而 言 ,软件 测试 从 项 目 确立 时 就 开始 了 ,前 后 要 经 过 以 下 一 些 主要 环节 : 需求 分 析 一 
测试 计划 一 测试 设计 一 测试 环境 搭建 一 测试 执行 一 测试 记录 一 缺陷 管理 一 软件 评估 一 
RTM。 

在 进行 有 关 问 题 曾 述 前 , 先 明确 分 工 ,一 般 而 言 ,需求 分 析 、 测 试用 例 编写 、 测 试 环境 拱 
建 、 测 试 执行 等 属于 测试 开发 人 员工 作 范 畴 ,而 测试 执行 以 及 缺陷 提交 等 属于 普通 测试 人 员 
的 工作 范畴 ,测试 负责 人 负责 整个 测试 各 个 环节 的 跟踪 、 实 施 .管理 等 。 

说 明 : 

(1) 以 上 流程 各 环节 并 未 包含 软件 测试 过 程 的 全 部 ,如 根据 实际 情况 还 可 以 实施 一 些 
测试 计划 评审 、 用 例 评审 、 测 试 培训 等 。 在 软件 正式 发 行 后 , 当 遇 到 一 些 严 重 问 题 时 ,还 需要 
进行 一 些 后 续 维 护 测试 等 。 

(2) 以 上 各 环节 并 不 是 独立 没 联系 的 ,实际 工作 千变万化 ,各 环节 一 些 交织 重生 在 所 
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难免 ,例如 编写 测试 用 例 的 同时 就 可 以 进行 测试 环境 的 搭建 工作 ,当然 也 可 能 由 于 一 些 需求 
不 清楚 而 重新 进行 需求 分 析 等 。 这 就 和 我 们 国家 提出 建设 有 中 国 特色 的 社会 主义 国家 一 
样 , 之 所 以 有 中 国 特色 , 那 是 因为 国情 不 一 样 。 所 以 在 实际 测试 过 程 中 也 要 做 到 具体 问题 具 
体 分 析 , 具 体 解决 。 


1. 需求 分 析 


需求 分 析 (Requiement Analyzing) 应 该 说 是 软件 测试 的 一 个 重要 环节 ,测试 开发 人 员 
对 这 一 环节 的 理解 程度 如 何 将 直接 影响 到 接 下 来 有 关 测试 工作 的 开展 。 

可 能 有 些 人 认为 测试 需求 分 析 无 关 紧 要 ,这 种 想法 是 很 不 对 的 。 需 求 分 析 不 但 重要 ,而 
且 至 关 重 要 。 

一 般 而 言 ,需求 分 析 包 括 软件 功能 需求 分 析 、 测 试 环境 需求 分 析 \ 测 试 资源 需求 分 析 等 。 

其 中 最 基本 的 是 软件 功能 需求 分 析 , 测 试 一 款 软 件 首先 要 知道 软件 能 实现 哪些 功能 以 
及 是 怎样 实现 的 。 例 如 一 款 Smartphone 包括 VoIP、Wi-Fi 以 及 Bluetooth 等 功能 。 那 就 应 
该 知道 软件 是 怎样 来 实现 这 些 功 能 的 ,为 了 实现 这 些 功 能 需要 哪些 测试 设备 以 及 如 何 搭建 
相应 测试 环境 等 ,否则 测试 就 无 从 谈 起 。 

既然 谈 了 需求 分 析 ,那么 根据 什么 来 分 析 呢 ? 不 能 凭空 设想 。 

总 地 说 来 ,做 测试 需求 分 析 的 依据 有 软件 需求 文档 、 软 件 规格 说 明 书 以 及 开发 人 员 的 设 
计 文 档 等 ,相信 一 些 管 理 规范 的 公司 在 软件 开发 过 程 中 都 有 这 些 文档 。 


2. 测试 计划 


测试 计划 (Test Plan) 一 般 由 测试 负责 人 来 编写 。 

测试 计划 的 依据 主要 是 项 目 开 发 计划 和 测试 需求 分 析 结果 。 测 试 计划 一 般 包括 以 下 一 
些 方面 。 

1) 测试 背景 

CO 软件 项 目 介绍 ; 

(2) 项 目 涉及 人 员 ( 如 软 硬 件 项 目 负责 人 等 ) 介 绍 以 及 相应 联系 方式 等 。 

2) 测试 依据 

CD 软件 需求 文档 ; 

(2) 软件 规格 书 ; 

(3) 软件 设计 文档 

(4) 其 他 ,如 参考 产品 等 。 

3) 测试 资源 

(1) 测试 设备 需求 ; 

(2) 测试 人 员 需 求 ; 

(3) 测试 环境 需求 ; 

(4) 其 他 。 

4) 测试 策略 

(1) 采取 测试 方法 ; 

(2) 搭建 哪些 测试 环境 ; 
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(3) 采取 哪些 测试 工具 以 测试 管理 工具 ; 

(4) 对 测试 人 员 进 行 培训 等 。 

5) 测试 日 程 

CD 测试 需求 分 析 ; 

(2) 测试 用 例 编写 ; 

(3) 测试 实施 ,根据 项 目 计划 ,测试 分 成 哪些 测试 阶段 (如 单元 测试 、 集 成 测试 、 系 统 测 
试 阶段 ,a.B 测试 阶段 等 ) ,每 个 阶段 的 工作 重点 以 及 投入 资源 等 。 

6) 其 他 

测试 计划 还 要 包括 测试 计划 编写 的 日 期 .作者 等 信息 ,计划 越 详细 越 好 。 

计划 赶不上 变化 ,一 份 计划 做 得 再 好 , 当 实际 实施 的 时 候 就 会 发 现 往往 很 难 按照 原 有 计 
划 开 展 。 如 在 软件 开发 过 程 中 资源 匮乏 、 人 员 流 动 等 都 会 对 测试 造成 一 定 的 影响 。 所 以 ,这 
些 就 要 求 测试 负责 人 能 够 从 宏观 上 来 调控 了 。 在 变化 面前 能 够 做 到 应 对 自如 、 处 乱 不 惊 是 
最 好 不 过 的 了 。 


3. 测试 设计 

测试 设计 主要 包括 测试 用 例 编写 和 测试 场景 设计 两 方面 。 

一 份 好 的 测试 用 例 对 测试 有 很 好 的 指导 作用 ,能 够 发 现 很 多 软件 问题 。 
测试 场景 设计 主要 也 就 是 测试 环境 问题 。 


4. 测试 环境 搭建 


不 同 软件 产品 对 测试 环境 有 着 不 同 的 要 求 。 如 C/S 及 B/S 架构 相关 的 软件 产品 ,那么 
对 不 同 操作 系统 ,如 Windows # 9], UNIX, Linux 甚至 iOS 等 ,这 些 测 试 环 境 都 是 必需 的 。 
而 对 于 一 些 伐 入 式 软件 ,如 手机 软件 ,如 果 想 测试 一 下 有 关 功 能 模块 的 耗 电 情 况 . 手 机 待机 
时 间 等 ,那么 可 能 就 需要 搭建 相应 的 电流 测试 环境 了 。 当 然 测 试 中 对 于 如 手机 网 络 等 环境 
都 有 所 要 求 。 

测试 环境 很 重要 ,符合 要 求 的 测试 环境 能 够 帮助 我 们 准确 地 测 出 软件 问题 ,并 且 做 出 正 
确 的 判断 。 

为 了 测试 一 款 软件 ,可 能 根据 不 同 的 需求 点 要 使 用 很 多 不 同 的 测试 环境 。 有 些 测试 环 
境 是 可 以 搭建 的 ,有 些 环境 无 法 搭建 或 者 搭建 成 本 很 高 。 不 管 如 何 , 我 们 的 目标 是 测试 软件 
问题 ,保证 软件 质量 。 测 试 环 境 问 题 ,应 根据 具体 产品 以 及 开发 者 的 实际 情况 而 采取 最 经 济 
的 方式 。 


5. 测试 执行 


测试 执行 过 程 又 可 以 分 为 以 下 阶段 : 单元 测试 一 集成 测试 一 系统 测试 一 出 厂 测试 ,其 
中 每 个 阶段 还 有 回归 测试 等 。 

从 测试 的 角度 而 言 ,测试 执行 包括 一 个 量 和 度 的 问题 ,也 就 是 测试 范围 和 测试 程度 的 问 
题 。 例 如 一 个 版 本 需要 测试 哪些 方面 ? 每 个 方面 要 测试 到 什么 程度 ? 

从 管理 的 角度 而 言 ,在 有 限 的 时 间 内 ,在 人 员 有 限 甚至 短缺 的 情况 下 ,要 考虑 如 何 分 工 ， 
如 何 合理 地 利用 资源 来 开展 测试 。 当 然 还 要 考虑 以 下 问题 。 
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(1) 当 测 试 人 员 测试 的 执行 不 到 位 、 数 衍 了 事 时 该 如 何 解决 ? 

(2) 测试 效率 问题 ,怎样 提高 测试 效率 ? 

(3) 根据 版 本 的 不 同 特点 是 只 做 验证 测试 还 是 采取 冒 烟 测试 抑或 是 系统 全 面 测试 ? 
CD 当 测 试 过 程 中 遇 到 一 些 偶然 性 随机 问题 该 怎样 处 理 ? 

(5) 当 版 本 中 出 现 很 多 新 问题 时 该 怎样 对 待 ?测试 停止 标准 ? 


总 之 ,测试 执行 过 程 中 会 遇 到 很 多 复杂 的 问题 ,具体 问题 应 具体 解决 。 
6. 测试 记录 


缺陷 记录 总 地 说 来 包括 两 方面 : 由 谁 提交 和 缺陷 描述 。 

一 般 而 言 ,缺陷 都 是 谁 测试 谁 提交 ,当然 有 些 公司 可 能 为 了 保证 所 提交 缺陷 的 质量 ,还 
会 在 提交 前 进行 缺陷 评估 ,以 确保 所 提交 的 缺陷 的 准确 性 。 

在 缺陷 的 描述 上 ,至 少 要 包括 以 下 一 些 方面 的 内 容 : 

序号 标题 预 置 条 件 操作 步骤 预期 结果 ”实际 结果 ”注释 ”严重 程度 ”概率 
版 本 ”测试 者 ”测试 日 期 

以 上 是 描述 一 个 Bug 时 通常 所 要 描述 的 内 容 ,当然 在 实际 提交 Bug 时 可 以 根据 实际 情 
况 进 行 补充 ,如 附 上 图 片 Log 文件 等 。 

另外 ,一 个 版 本 软件 测试 完毕 ,还 要 根据 测试 情况 出 份 测试 报告 ,这 也 是 所 要 经 过 的 一 
个 环节 。 


7. 缺陷 管理 


缺陷 管理 方面 ,很 多 公司 都 采取 缺陷 管理 工具 来 进行 管理 ,常见 缺陷 管理 工具 有 Test 
Director, BugFree 等 。 


8. 软件 评估 


这 里 的 评估 指 软件 经 过 一 轮 又 一 轮 测试 后 ,确认 软件 无 重大 问题 或 者 问题 很 少 的 情况 
下 ,对 准备 发 给 客户 的 软件 进行 评估 ,以 确定 是 否 能 够 发 行 给 客户 或 投放 市 场 。 

软件 评估 小 组 一 般 由 项 目 负 责 人 、 营 销 人 员 、 部 门 经 理 等 组 成 ,也 可 能 是 由 客户 指定 的 
第 三 方 人 员 组 成 。 


9. 测试 总 结 
每 个 版 本 有 每 个 版 本 的 测试 总 结 ,每 个 阶段 有 每 个 阶段 的 测试 总 结 , 当 项 目 完 成 RTM 
后 ,一 般 要 对 整个 项 目 做 个 回顾 总 结 ,看 有 哪些 做 得 不 足 的 地 方 ,有 哪些 经 验 可 以 对 今后 的 


测试 工作 做 借鉴 使 用 ,等 等 。 测 试 总 结 无 严格 格式 、 字 数 限制 。 应 该 说 ,测试 总 结 还 是 很 重 
要 的 。 


10. 测试 维护 


由 于 测试 的 不 完全 性 , 当 软 件 正 式 release 后 ,客户 在 使 用 过 程 中 ,难免 遇 到 一 些 问题 ,有 
的 甚至 是 严重 的 问题 ,这 就 需要 修改 有 关 问 题 ,修改 后 需要 再 次 对 软件 进行 测试 .评估 、 发 行 。 
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在 软件 测试 过 程 中 ,还 需要 注意 以 下 几 点 。 

(1) 测试 人 员 参 与 需求 分 析 和 设计 评审 ,确定 需求 的 可 测 性 ,并 贯穿 到 开发 的 整个 过 程 ; 

(2) 项 目 组 编写 开发 计划 书 ( 含 集成 计划 ) ,测试 人 员 据 此 产生 创建 计划 书 (或 直接 采用 
集成 计划 ); 

(3) 测试 人 员 细 化 测试 计划 和 测试 用 例 ,产生 测试 计划 书 和 测试 用 例 说 明 书 ; 

(4) 由 项 目 组 .SQA 人 员 、 测 试 人 员 一 起 对 测试 计划 书 和 测试 用 例 说 明 书 进行 评审 

(5) 开发 人 员 完 成 单元 模块 编码 ,然后 对 单元 模块 经 过 一 系列 静态 检查 和 动态 测试 ; 

(6) 项 目 组 执行 集成 测试 ,验证 各 通过 单元 测试 的 模块 组 合 在 一 起 的 功能 及 其 接口 、 数 
据 传输 的 正确 性 ,满足 系统 设计 所 规定 的 特性 ; 

(7) 版 本 创建 人 员 按 集成 或 创建 计划 、 从 配置 库 中 获得 相应 版 本 的 源 代码 进行 版 本 创 
建 活动 ,并 对 创建 版 本 进行 管理 ; 

(8) 测试 人 员 对 通过 创建 的 工作 产品 执行 冒 烟 测 试 , 冒 烟 测 试 通过 准则 由 测试 人 员 和 
项 目 组 事先 在 测试 计划 中 约定 ,对 冒 烟 测 试 未 通过 的 系统 ,原则 上 由 项 目 组 当天 解决 问题 ， 
再 次 提交 测试 版 本 ; 

(9) 测试 人 员 对 完成 集成 的 模块 执行 功能 测试 , 即 流程 图 所 示 功 能 集成 测试 。 执 行 该 
过 程 实际 上 是 对 项 目 组 集成 测试 的 回归 测试 , 它 是 增 量 式 的 ; 

(10) 重复 步骤 (5) 一 (9) ,直至 该 版 本 所 有 功能 都 完成 开发 和 经 过 功能 集成 测试 ; 

AD 测试 人 员 根据 测试 计划 中 定义 的 系统 测试 策略 ,完成 其 他 约定 内 容 的 测试 ,如 性 
能 测试 .可 使 用 性 测试 .安全 性 测试 .安装 / 反 安 装 测试 等 

(12) 完成 全 部 测试 工作 或 根据 时 间 驱 动 ,测试 负责 人 撰写 测试 分 析 报 告 ; 

(13) 测试 分 析 报告 由 SQA 人 员 负 责 组 织 评审 ,并 由 测试 部 经 理 批准 ; 

(14) 对 没 达到 测试 出 口 准则 的 项 目 , 由 高 级 经 理 进 行 审批 后 ,可 做 例外 放行 ; 

(15) 通过 测试 部 测试 的 项 目 , 在 公司 范围 内 进行 产品 版 本 发 布 并 移交 产品 库 。 


G. 软件 测试 与 软件 开发 


1. 测试 与 软件 开发 各 阶段 的 关系 


软件 开发 过 程 是 一 个 自 顶 向 下 ,逐步 细 化 的 过 程 ,首先 在 软件 计划 阶段 定义 了 软件 的 作 
用 域 ,然后 进行 软件 需求 分 析 , 建 立 软件 的 数据 域 . 功 能 和 性 能 需求 .约束 和 一 些 有 效 性 准 
则 。 接 着 进入 软件 开发 ,首先 是 软件 设计 ,然后 再 把 设计 用 某 种 程序 设计 语言 转换 成 程序 代 
码 。 而 测试 过 程 则 是 依 相反 的 顺序 安排 的 自 底 向 上 ,逐步 集成 的 过 程 , 低 一 级 测试 为 上 一 级 
测试 准备 条 件 。 此 外 还 有 两 者 平行 地 进行 测试 。 

如 图 1-7 所 示 ,首先 对 每 一 个 程序 模块 进行 单元 测试 ,消除 程序 模块 内 部 在 逻辑 上 和 功 
能 上 的 错误 和 缺陷 。 再 对 照 软件 设计 进行 集成 测试 ,检测 和 排除 子 系统 (或 系统 ) 结 构 上 的 
错误 。 随 后 再 对 照 需求 ,进行 确认 测试 。 最 后 从 系统 全 体 出 发 ,运行 系统 ,看 是 否 满足 要 求 。 


2. 测试 与 开发 的 并 行 性 
在 软件 的 需求 得 到 确认 并 通过 评审 后 ,概要 设计 工作 和 测试 计划 制定 设计 工作 就 要 并 
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图 1-7 软件 测试 与 软件 开发 过 程 的 关系 


行进 行 。 如 果 系 统 模块 已 经 建立 ,对 各 个 模块 的 详细 设计 、 编 码 单元 测试 等 工作 又 可 并 行 。 
待 每 个 模块 完成 后 ,可 以 进行 集成 测试 .系统 测试 。 并 行 流程 如 图 1-8 所 示 。 
详细 设计 编码 单元 测试 
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* 项 目 阶段 任务 的 里 程 碑 
测试 计划 测试 过 程 测试 评审 
图 1-8 软件 测试 与 软件 开发 的 并 行 性 


(6 软件 测试 的 重要 性 和 实质 


1. 软件 测试 的 重要 性 


人 们 常常 以 为 ,开发 一 个 程序 是 困难 的 ,测试 一 个 程序 则 比较 容易 。 这 其 实 是 误解 。 设 计 
测试 用 例 是 一 项 细致 并 需要 高 度 技巧 的 工作 , 稍 有 不 慎 就 会 顾此失彼 ,发 生 不 应 有 的 疏漏 。 

不 论 是 黑 盒 测试 方法 还 是 白 盒 测试 方法 ,由 于 测试 情况 数量 巨大 ,都 不 可 能 进行 彻底 的 
测试 。 所 谓 彻底 测试 ,就 是 让 被 测 程序 在 一 切 可 能 的 输入 情况 下 全 部 执行 一 遍 。 通 常 也 称 
这 种 测试 为 “ 穷 举 测试 >.。“ 黑 盒 ? 法 是 穷 举 输入 测试 ,只 有 把 所 有 可 能 的 输入 都 作为 测试 情 
况 使 用 ,才能 以 这 种 方法 查 出 程序 中 所 有 的 错误 。 实 际 上 测试 情况 有 无 穷 多 个 ,人 们 不 仅 要 
测试 所 有 合法 的 输入 ,而且 还 要 对 那些 不 合法 但 是 可 能 的 输入 进行 测试 。“ 白 盒 ” 法 是 穷 举 
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路 径 测试 ,贯穿 程序 的 独立 路 径 数 是 天 文 数字 ,但 即使 每 条 路 径 都 测试 了 仍然 可 能 有 错误 。 
第 一 , 穷 举 路 径 测试 决 不 能 查 出 程序 违反 了 设计 规范 , 即 程序 本 身 是 个 错误 的 程序 。 第 二 ， 
穷 举 路 径 测试 不 可 能 查 出 程序 中 因 遗 漏 路 径 而 出 错 。 第 三 , 穷 举 路 径 测 试 可 能 发 现 不 了 一 
些 与 数据 相关 的 错误 。E. W. Dijkstra 的 一 句 名 言 对 测试 的 不 彻底 性 做 了 很 好 的 注解 :“ 程 
序 测试 只 能 证 明 错误 的 存在 ,但 不 能 证 明 错 误 不 存在 ”。 

在 实际 测试 中 , 穷 举 测试 工作 量 太 大 ,实践 上 行 不 通 ,这 就 注定 了 一 切实 际 测试 都 是 不 
彻底 的 。 当 然 就 不 能 够 保证 被 测试 程序 中 不 存在 遗漏 的 错误 。 软 件 工程 的 总 目标 是 充分 利 
用 有 限 的 人 力 和 物力 资源 ,高 效率 、 高 质量 地 完成 测试 。 为 了 降低 测试 成 本 ,选择 测试 用 例 
时 应 注意 遵守 “经 济 性 ”的 原则 。 第 一 ,要 根据 程序 的 重要 性 和 一 旦 发 生 故 障 将 造成 的 损失 
来 确定 它 的 测试 等 级 ; 第 二 ,要 认真 研究 测试 策略 ,以 便 能 使 用 尽 可 能 少 的 测试 用 例 , 发 现 
尽 可 能 多 的 程序 错误 。 掌握 好 测试 量 是 至 关 重 要 的 ,一 位 有 经 验 的 软件 开发 管理 人 员 在 谈 
到 软件 测试 时 曾 这 样 说 过 :“ 不 充分 的 测试 是 思春 的 ,而 过 度 的 测试 是 一 种 罪 巷 ”。 测 试 不 
足 意味 着 让 用 户 承担 隐藏 错误 带 来 的 危险 ,过度 测 试 则 会 浪费 许多 宝贵 的 资源 。 

测试 是 软件 生存 期 中 费用 消耗 最 大 的 环节 。 测 试 费用 除了 测试 的 直接 消耗 外 ,还 包括 
其 他 的 相关 费用 。 能 够 决定 需要 做 多 少 次 测试 的 主要 影响 因素 如 下 。 

CD 系统 的 目的 。 系 统 的 目的 的 差别 在 很 大 程度 上 影响 所 需要 进行 的 测试 的 数量 。 那 
些 可 能 产生 严重 后 果 的 系统 必须 要 进行 更 多 的 测试 。 一 台 在 Boeing 757 上 的 系统 应 该 比 
一 个 用 于 公共 图 书馆 中 检索 资料 的 系统 需要 更 多 的 测试 。 一 个 用 来 控制 密封 燃气 管道 的 系 
统 应 该 比 一 个 与 有 毒 爆炸 物品 无 关 的 系统 有 更 高 的 可 信和 度 。 一 个 安全 关键 软件 的 开发 组 比 
一 个 游戏 软件 开发 组 要 有 苛刻 得 多 的 查找 错误 方面 的 要 求 。 

(2) 潜在 的 用 户 数量 。 一 个 系统 的 潜在 用 户 数量 也 在 很 大 程度 上 影响 了 测试 必要 性 的 
程度 。 这 主要 是 由 于 用 户 团体 在 经 济 方面 的 影响 。 一 个 在 全 世界 范围 内 有 几 千 个 用 户 的 系 
统 肯 定 比 一 个 只 在 办 公 室 中 运行 的 有 两 三 个 用 户 的 系统 需要 更 多 的 测试 。 如 果 不 能 使 用 ， 
前 一 个 系统 的 经 济 影响 肯定 比 后 一 个 系统 大 。 除 此 以 外 ,在 分 配 处 理 错误 的 时 候 , 所 花 的 代 
价 的 差别 也 很 大 。 如 果 在 内 部 系统 中 发 现 了 一 个 严重 的 错误 ,在 处 理 错误 的 时 候 的 费用 就 
相对 少 一 些 ,如 果 要 处 理 一 个 遍布 全 世界 的 错误 就 需要 花费 相当 大 的 财力 和 精力 。 

(3) 信息 的 价值 。 在 考虑 测试 的 必要 性 时 ,还 需要 将 系统 中 所 包含 的 信息 的 价值 考虑 
在 内 ,一 个 支持 许多 家 大 银行 或 众多 证 券 交 易 所 的 客户 /服务 器 系统 中 含有 经 济 价值 非常 高 
的 内 容 。 很 显然 ,这 一 系统 需要 比 一 个 支持 鞋 店 的 系统 要 进行 更 多 的 测试 。 这 两 个 系统 的 
用 户 都 希望 得 到 高 质量 、 无 错误 的 系统 ,但 是 前 一 种 系统 的 影响 比 后 一 种 要 大 得 多 。 因 此 应 
该 从 经 济 方面 考虑 ,投入 与 经 济 价值 相对 应 的 时 间 和 人 金钱 去 进行 测试 。 

(4) 开发 机 构 。 一 个 没有 标准 和 缺少 经 验 的 开发 机 构 很 可 能 开发 出 充满 错误 的 系统 。 
在 一 个 建立 了 标准 和 有 很 多 经 验 的 开发 机 构 中 开发 出 来 的 系统 中 的 错误 不 会 很 多 ,因此 ,对 
于 不 同 的 开发 机 构 来 说 ,所 需要 的 测试 的 必要 性 也 就 截然 不 同 。 

然而 ,那些 需要 进行 大 幅度 改善 的 机 构 反 而 不 大 可 能 认识 到 自身 的 弱点 。 那 些 需要 更 
加 严格 的 测试 过 程 的 机 构 往往 是 最 不 可 能 进行 这 一 活动 的 ,在 许多 情况 下 ,机 构 的 管理 部 门 
并 不 能 真正 地 理解 开发 一 个 高 质量 的 系统 的 好 处 。 

(5) 测试 的 时 机 。 测 试 量 会 随时 间 的 推移 发 生 改变 。 在 一 个 竞争 很 激烈 的 市 场 里 , 争 
取 时 间 可 能 是 制胜 的 关键 ,开始 可 能 不 会 在 测试 上 花 多 少时 间 ,但 几 年 后 如 果 市 场 分 配 格局 
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已 经 建立 起 来 了 ,那么 产品 的 质量 就 变 得 更 重要 了 ,测试 量 就 要 加 大 。 测 试 量 应 该 针对 合适 
的 目标 进行 调整 。 

1) 掌握 好 软件 测试 方法 是 提升 软件 企业 工作 质量 的 基础 

(1) 负载 测试 

负载 测试 指 的 是 最 常见 的 验证 一 般 性 能 需求 而 进行 的 性 能 测试 ,也 是 用 户 最 常见 的 性 
能 需求 ,就 是 “ 既 要 马 儿 跑 得 快 ,又 要 马 儿 少 吃 草 ”。 因 此 ,负载 测试 主要 是 考察 软件 系统 在 
既定 负载 下 的 性 能 表现 。 对 负载 测试 可 以 有 如 下 理解 : 首先 ,负载 测试 是 站 在 用 户 的 角度 
去 观察 在 一 定 条 件 下 软件 系统 的 性 能 表现 。 其 次 ,负载 测试 的 预期 结果 是 用 户 的 性 能 需求 
得 到 满足 。 此 指标 一 般 体现 为 响应 时 间 、 交 易 容 量 、 并 发 容量 资源 使 用 率 等 。 

(2) 压力 测试 

压力 测试 是 为 了 考察 系统 在 极端 条 件 下 的 表现 ,极端 条 件 可 以 是 超 负荷 的 交易 量 和 并 发 
用 户 数 。 注意 ,这 个 极端 条 件 并 不 一 定 是 用 户 的 性 能 需求 ,可 能 要 远 远 高 于 用 户 的 性 能 需求 。 
可 以 这 样 理解 ,压力 测试 和 负载 测试 不 同 的 是 ,压力 测试 的 预期 结果 就 是 系统 出 现 问题 ,而 我 
们 要 考察 的 是 系统 处 理 问 题 的 方式 。 例 如 说 ,我 们 期 待 一 个 系统 在 面临 压力 的 情况 下 能 够 保 
持 稳 定 , 处 理 速度 可 以 变 慢 ,但 不 能 使 系统 崩溃 。 因 此 ,压力 测试 是 能 让 我 们 识别 系统 的 弱点 
和 在 极限 负载 下 程序 将 如 何 运行 。 例 如 ,负载 测试 关心 的 是 用 户 规则 和 需求 ,压力 测试 关心 的 
是 软件 系统 本 身 。 对 于 它们 的 区 别 , 可 以 用 华山 论 剑 的 例子 来 更 加 形象 地 描述 一 下 。 如 果 把 
郭靖 看 作 被 测试 对 象 ,那么 压力 测试 就 像 是 郭靖 和 已 经 走火 入 魔 的 欧阳 峰 过 招 ,欧阳 锋 蛮 打 乱 
来 , 毫 无 套路 , 尽 可 能 地 去 打倒 对 方 。 郭 靖 要 能 应 对 住 ,并 且 不 能 丢 进 小 命 。 而 常规 性 能 测试 
就 好 比 郭靖 和 黄 药师 . 洪 七 公 三 人 约定 ,只 要 郭靖 能 分 别 接 两 位 高 手 一 百 招 ,郭靖 就 算 胜 。 
至 于 一 百 招 后 哪怕 郭靖 会 输 掉 那 也 不 用 管 了 。 他 只 要 能 做 到 接 下 一 百 招 ,就 算 通 过 。 

(3) 并 发 测试 

并 发 测试 用 于 验证 系统 的 并 发 处 理 能 力 。 一 般 是 和 服务 器 端 建立 大 量 的 并 发 连接 , 通 
过 客户 端的 响应 时 间 和 服务 器 端的 性 能 监测 情况 来 判断 系统 是 否 达 到 了 既定 的 并 发 能 力 指 
标 。 负 载 测试 往往 会 使 用 并 发 来 创造 负载 ,之 所 以 把 并 发 测试 单独 提出 来 ,是 因为 并 发 测试 
往往 涉及 服务 器 的 并 发 容量 ,以 及 多 进程 /多 线程 协调 同步 可 能 带 来 的 问题 。 这 是 要 特别 注 
意 ,必须 测试 的 。 

(4) 基准 测试 

当 软 件 系 统 中 增加 一 个 新 的 模块 的 时 候 , 需 要 做 基准 测试 ,以 判断 新 模块 对 整个 软件 系 
统 的 性 能 影响 。 按 照 基 准 测 试 的 方法 ,需要 打开 /关闭 新 模块 至 少 各 做 一 次 测试 。 关 闭 模 块 
之 前 的 系统 各 个 性 能 指标 记 下 来 作为 基准 (Benchmark) ,然后 与 打开 模块 状态 下 的 系统 性 
能 指标 做 比较 ,以 判断 模块 对 系统 性 能 的 影响 。 

(5) 稳定 性 测试 

“路 遥 知 马力 ”, 在 这 里 要 说 的 是 和 性 能 测试 有 关 的 稳定 性 测试 , 即 测 试 系统 在 一 定 负载 
下 运行 长 时 间 后 是 否 会 发 生 问 题 。 软 件 系 统 的 有 些 问题 是 不 能 一 下 子 就 暴露 出 来 的 ,或 者 
说 是 需要 时 间 积 累 才能 达到 能 够 测试 的 程度 。 为 什么 会 需要 这 样 的 测试 呢 ? 因为 有 些 软件 
的 问题 只 有 在 运行 一 天 或 一 个 星期 甚至 更 长 的 时 间 才 会 暴露 。 这 种 问题 一 般 是 程序 占用 资 
源 却 不 能 及 时 释放 而 引起 的 。 例 如 ,内 存 泄漏 问题 就 是 经 过 一 段 时 间 积 累 才 会 慢 慢 变 得 显 
著 ,在 运行 初期 却 很 难 检测 出 来 ; 还 有 客户 端 和 服务 器 在 负载 运行 一 段 时 间 后 ,建立 了 大 量 
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的 连接 通路 , 却 不 能 有 效 地 复 用 或 及 时 释放 。 
(6) 可 恢复 测试 
测试 系统 能 否 快速 地 从 错误 状态 中 恢复 到 正常 状态 。 例 如 ,在 一 个 配 有 负载 均衡 的 系 
统 中 ,主机 承受 了 压力 无 法 正常 工作 后 ,备份 机 是 否 能 够 快速 地 接管 负载 。 可 恢复 测试 通常 
结合 压力 测试 一 起 来 做 。 每 种 测试 有 其 存在 的 空间 和 目的 。 当 接手 一 个 软件 项 目 后 ,在 有 
限 的 资源 条 件 下 ,选择 去 做 哪 一 种 测试 ,这 应 该 根据 当前 软件 过 程 阶段 和 项 目的 本 身 特点 来 
做 选择 。 例 如 ,在 集成 测试 的 时 候 要 做 基准 测试 ,在 软件 产品 每 个 发 布点 要 做 性 能 测试 。 
2) 编制 好 软件 测试 的 过 程 是 提升 软件 企业 工作 质量 的 前 提 
(1) 拟定 测试 计划 
在 制定 测试 计划 时 ,要 推荐 整个 项 目的 开发 时 间 和 开发 进度 以 及 一 些 人 为 因素 和 客观 
条 件 等 ,使 得 测试 计划 是 可 行 的 。 测 试 计划 的 内 容 主要 有 测试 的 内 容 、 进 度 、 测 试 所 需 的 环 
境 和 条 件 、 测 试 培训 等 。 
(2) 编制 测试 纲领 
测试 纲领 是 测试 的 依据 。 它 清楚 详尽 地 规定 了 在 测试 中 针对 系统 的 每 一 项 功能 或 特性 
所 必须 完成 的 基础 测试 项 目 和 测试 完成 的 规范 。 
(3) 依据 测试 纲领 设计 和 生成 测试 用 例 
在 设计 测试 用 例 的 时 候 , 可 综合 应 用 前 面 介 绍 的 测试 用 例 和 设计 技术 ,写作 测试 设计 说 
明文 档 ,其 内 容 主 要 有 被 测 项 目 、. 输 入 数据 ,测试 过 程 、 预 期 输出 效果 等 。 
(4) 实施 测试 
测试 的 实施 阶段 是 由 一 系列 的 测试 周期 组 成 的 。 在 每 个 测试 周期 中 ,测试 人 员 和 开发 人 
员 将 依据 预先 编制 好 的 测试 纲领 和 准备 好 的 测试 用 例 ,对 被 测 软件 或 设备 进行 完整 的 测试 。 
(5) 生成 测试 报告 
测试 完成 后 ,要 形成 相应 的 测试 报告 ,主要 对 测试 进行 概要 说 明 , 列 出 测试 的 结论 ,指出 缺 
。 男 外 ,给 出 一 些 建议 ,如 可 采用 的 修改 方法 ,各 项 修改 预计 的 工作 量 及 修改 的 负责 人 员 。 
3) 软件 测试 是 提升 软件 企业 硬件 水 平 的 根本 手段 
(1) 软件 测试 是 改进 软件 组 织 管 理 过 程 的 必要 途径 。 
软件 测试 过 程 是 提取 软件 测试 过 程 中 可 计量 的 属性 ,在 测试 过 程 进行 中 以 一 定 频 度 不 断 
地 采集 这 些 属性 的 值 ,并 采用 一 些 恰当 的 分 析 方 法 对 得 到 的 这 些 数据 进行 分 析 , 从 而 量化 地 评 
定 测试 过 程 的 能 力 和 性 能 ,提高 测试 过 程 的 可 视 性 ,帮助 软件 组 织 管理 以 及 改进 软件 测试 过 程 。 
评价 : 通过 评价 比较 实际 软件 过 程 与 标准 或 计划 间 的 差异 。 过 程 评价 是 衡量 过 程 好 坏 
和 过 程 改 进 效果 的 有 效 手段 。 控 制 : 通过 测试 所 反映 的 产品 状态 信息 、 项 目 状态 信息 和 过 
程 状 态 信息 ,可 以 帮助 制定 合理 的 管理 控制 措施 ,使 产品 偏离 度 、 项 目 偏离 度 和 过 程 偏离 度 
在 可 控制 的 范围 内 ,使 项 目 过 程 的 性 能 表现 稳定 ,并 且 项 目 过 程 性 能 满足 需求 。 预 测 : 历史 
测试 数据 的 积累 能 帮助 预测 当前 项 目的 相关 属性 数据 ,有 助 于 计划 和 决策 的 制定 。 改 进 : 
测试 并 不 能 直接 改进 过 程 ,但 基于 测试 的 理解 和 评价 为 过 程 改 进 提供 了 有 效 的 线索 。 根 据 
这 些 线索 再 结合 测试 所 记录 的 过 程 场景 信息 分 析 过 程 偏 差 的 原因 ,帮助 过 程 改进 制定 有 效 
的 变更 措施 。 过 程 改进 既是 测试 的 结果 ,又 是 测试 的 动因 。 
(2) 软件 测试 是 保证 软件 质量 的 必要 依据 。 
首先 ,软件 质量 是 指 软 件 的 功能 和 性 能 满足 用 户 需 求 和 期 望 的 程度 ,是 软件 的 一 种 内 在 
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特性 。 软 件 测试 则 是 通过 技术 流程 .工具 人员 以 及 管理 手段 ,检测 软件 文档 .软件 中 间 产 
品 和 最 终 产品 ,查找 和 报告 软件 缺陷 、 错 误 以 及 隐患 的 技术 。 通 过 跟踪 缺陷 、 错 误 及 隐患 的 
修正 过 程 ,确保 软件 产品 、 中 间 产 品 和 文档 符合 软件 工程 过 程 需求 和 用 户 的 最 终 需 求 。 其 
次 ,软件 测试 就 是 利用 测试 工具 按照 测试 方案 和 流程 对 产品 进行 功能 和 性 能 测试 ,甚至 根据 
需要 编写 不 同 的 测试 工具 ,设计 和 维护 测试 系统 ,对 测试 方案 可 能 出 现 的 问题 进行 分 析 和 评 
估 。 执 行 测试 用 例 后 ,需要 跟踪 故障 ,以 确保 开发 的 产品 适合 需求 。 目 前 ,国内 软件 企业 对 
软件 的 质量 越 来 越 重视 。 很 多 软件 厂商 对 软件 开发 过 程 进行 了 CMM 及 ISO 的 认证 与 标 
准 贯 彻 。 然 而 ,要 想 保证 软件 质量 ,在 注重 软件 开发 过 程 规范 化 的 同时 ,也 不 能 忽视 软件 测 
试 工 作对 于 保证 软件 质量 的 重要 意义 。 

总 之 , 随 着 软件 应 用 的 领域 不 断 深入 ,设计 的 复杂 程度 逐步 扩大 ,开发 的 周期 不 断 缩短 ， 
质量 的 要 求 不 断 提 高 ,软件 企业 也 面临 着 巨大 挑战 。 因 此 ,加 强 软 件 测试 过 程 和 技术 ,可 以 
有 效 保证 软件 质量 ,这 种 观念 正在 被 更 多 的 软件 企业 人 士 理解 ,接受 和 实施 ,也 是 软件 企业 
快速 发 展 的 必 经 之 道 。 


2. 软件 测试 的 实质 


下 面 从 以 下 几 点 了 解 软件 测试 的 实质 。 

CD 完全 测试 是 不 可 能 的 。 例 如 ,完全 的 白 盒 测试 和 完全 的 黑 盒 测试 都 是 不 可 能 的 。 

D 白 盒 测试 

图 1-9 是 一 个 不 超过 100 行 的 程序 结构 图 ,有 大 概 100 000 000 000 000 条 可 能 的 执行 路 
径 。 以 每 秒 执行 1000 个 测试 用 例 的 速度 计算 ,完成 所 有 可 能 路 径 的 测试 大 概 需 要 3170 年 。 

O 黑 盒 测 试 

如 图 1-10 所 示 ,在 32 位 的 计算 机 上 运行 ,只 考虑 x,y 是 整数 ,不 同 的 测试 数据 组 合 最 大 
可 能 数目 为 : 2* ,以 每 秒 执行 1000 个 测试 用 例 的 速度 计算 ,完成 测试 大 概 需要 工作 5 亿 年 。 
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1-9 不 超过 100 行 的 程序 结构 图 图 1-10 不 同 的 测试 数据 组 合 
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无 法 进行 完全 测试 的 原因 有 以 下 几 点 。 

QD 输入 量 太 大 ; 

四 输出 结果 太 多 ; 

O 软件 执行 路 径 太 多 ; 

@ 软件 说 明 书 本 身 就 是 主观 的 产物 ,可 能 不 正确 ,也 经 常会 变动 。 
(2) 软件 测试 是 有 风险 的 行为 。 

(3) 测试 很 难 显示 光伏 的 软件 缺陷 。 

(4) 找到 的 软件 缺陷 越 多 ,说 明 软 件 缺陷 越 多 。 

(5) 杀 虫 剂 现 象 : 软件 测试 越 多 ,软件 的 免疫 力 越 强 。 

(6) 并非 所 有 的 软件 缺陷 都 要 修复 。 

(7) 难以 说 清 的 软件 缺陷 。 

至 少 满足 以 下 5 个 规则 之 一 才 称 为 软件 缺陷 。 

CD 软件 未 实现 产品 说 明 书 要 求 的 功能 。 

@ 软件 出 现 了 产品 说 明 书 指明 不 应 出 现 的 错误 。 

@ 软件 实现 了 产品 说 明 书 未 提 到 的 功能 。 

@ 软件 未 实现 产品 说 明 书 虽 未 明确 提 及 但 应 该 实现 的 目标 。 

C) 软件 难以 理解 ,不易 使 用 、 运 行 缓慢 或 者 从 测试 员 的 角度 看 最 终 用 户 会 认为 不 好 。 
(8) 产品 说 明 书 不 断 变 化 ,没有 最 终 版 本 。 

(9) 软件 测试 员 在 产品 小 组 中 不 受 欢迎 。 

(10) 软件 测试 是 一 项 讲究 条 理 的 技术 工作 。 
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. 举例 说 明 什 么 是 软件 缺陷 。 

.软件 测试 技术 的 发 展 历史 和 现状 如 何 ? 

- 软件 测试 一 般 需要 经 历 哪儿 个 步骤 ? 

- 软件 测试 一 般 所 需要 经 历 的 过 程 是 怎样 的 ? 
- 软件 测试 与 软件 开发 的 关系 是 怎样 的 ? 

- 软件 测试 的 实质 是 什么 ? 
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本 章 学 习 重 点 


。 理解 质量 与 软件 质量 的 定义 。 

。 熟悉 常见 的 软件 质量 模型 。 

* 了解 标准 的 发 展 情况 。 

* 熟悉 软件 质量 与 软件 测试 .软件 质量 保证 与 软件 测试 之 间 的 联系 。 


本 章 学 习 难 点 


熟悉 常见 的 软件 质量 模型 。 


8.1 质量 的 定义 


想 提 高 质量 ,就 必须 给 出 质量 定义 并 测量 它 。 大 众 化 的 观点 和 含糊 其 词 的 定义 ,不 利于 
质量 工程 的 开展 。 质 量 是 多 维 的 概念 ,包括 实体 、 实 体 的 属性 和 对 实体 的 观点 。 

早 在 1970 年 ,Juran 和 Gryna 把 质量 定义 为 “ 适 于 使 用 ”。1979 年 ,Crosby 将 质量 定义 
为 “符合 需求 ”"。“ 符 合 需求 ” 隐 含 着 需求 必须 明确 地 说 明 的 意思 ; 而 “ 适 于 使 用 ” 隐 含 顾客 的 
需求 和 预期 。 顾 客 的 需求 和 预期 包括 产品 和 服务 是 否 适合 顾客 使 用 。 

国际 标准 ISO 8404《 质 量 管理 与 质量 保证 术语 ) 对 质量 的 定义 是 “反映 实体 满足 明确 的 
和 隐 含 的 需要 的 能 力 的 特性 的 总 和 ”。 作 为 软件 质量 ,在 国际 标准 ISO 14598《 软 件 工程 产 
品评 价 ) 中 也 是 这 样 定义 的 :“ 实 体 特性 的 总 和 ,满足 明确 或 隐 含 要 求 的 能 力 ”。 


1. QA 和 QC 


QA 即 英文 Quality Assurance 的 简称 ,中 文 意思 是 质量 保证 。 

QC 即 英文 Quality Control 的 简称 ,中 文 意思 是 质量 控制 。 

QC fil QA 的 主要 区 别 : 前 者 是 保证 产品 质量 符合 规定 ,后 者 是 建立 体系 并 确保 体系 按 
要 求 运 作 , 以 提供 内 外 部 的 信任 。 同 时 .QC 和 QA 又 有 相同 点 : BU QC 和 QA 都 要 进行 验 
证 ,如 QC 按 标准 检测 产品 就 是 验证 产品 是 否 符合 规定 要 求 ,QA 进行 内 审 就 是 验证 体系 运 
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作 是 否 符合 标准 要 求 , 又 如 QA 进行 出 货 稽核 和 可 靠 性 检测 ,就 是 验证 产品 是 否 已 按 规定 进 
行 各 项 活动 ,是 否 能 满足 规定 要 求 ,以 确保 工厂 交付 的 产品 都 是 合格 和 符合 相关 规定 的 。 


2. 测度 与 度量 


一 个 实体 的 质量 好 坏 是 需要 测量 的 ,而 测试 就 需要 首先 建立 质量 指标 体系 或 质量 模型 ， 
然后 使 用 特定 测量 方法 才能 实施 测量 。 测 度 的 运用 是 建立 测量 方法 的 依据 ,也 是 解决 软件 
质量 测量 的 关键 。 

测度 是 把 数字 和 符号 分 配给 现实 世界 实体 的 属性 ,根据 明确 定义 规则 来 定义 它们 
Fenton(FEN91)。 软 件 工程 中 使 用 的 “独立 ”有 多 种 含义 ,在 软件 质量 中 用 于 测量 的 一 种 量 
化 的 标 度 和 方法 即 为 “测度 ”, 而 名 词 “度量 "用 来 指 测量 的 结果 。 
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信息 技术 的 飞速 发 展 ,使 软件 产品 应 用 到 社会 的 各 个 领域 ,软件 产品 的 质量 自然 成 为 人 
们 共同 关注 的 焦点 .不 论 软件 的 生产 者 还 是 软件 的 使 用 者 , 均 生 存在 竞争 的 环境 中 ,软件 开 
发 商 为 了 占有 市 场 ,必须 把 软件 质量 作为 企业 的 重要 目标 之 一 ,以 免 在 激烈 的 竞争 中 被 淘汰 
出 局 。 用 户 为 了 保证 自己 业务 的 顺利 完成 ,当然 希望 选用 优质 的 软件 。 质 量 不 佳 的 软件 产 
品 不 仅 会 使 开发 商 的 维护 费用 和 用 户 的 使 用 成 本 大 幅 增 加 ,还 可 能 产生 其 他 的 责任 风险 。 
一 些 关 键 的 应 用 中 ,如 民航 订 票 系统 \ 银 行 结算 系 统 ,证券 交易 系统 、 自 动 飞行 控制 软件 、 军 
事 防御 和 核电 站 安全 控制 系统 等 ,车 使 用 质量 有 问题 的 软件 ,会 造成 灾难 性 的 后 果 。 

软件 测试 是 软件 质量 保证 工作 的 一 个 重要 环节 。 因 此 ,首先 应 对 什么 是 软件 质量 有 一 
个 明确 的 认识 。 

在 1991 年 ,软件 产品 质量 评价 国际 标准 ISO 9126 中 定义 的 软件 质量 是 :“ 软 件 满足 规 
定 或 潜在 用 户 需 求 特 性 的 总 和 ”。 到 1999 年 ,软件 产品 质量 评价 国际 标准 ISO 14598 把 软 
件 质量 定义 为 :“ 软 件 特性 的 总 和 ,软件 满足 规定 或 潜在 用 户 需求 的 能 力 ”。 

把 “能 力 ” 加 到 “质量 "的 定义 中 ,是 由 于 一 般 人 对 “质量 ”的 理解 是 一 个 实体 的 “属性 ”， 
“属性 ”好 就 是 质量 好 。 但 属性 是 内 在 的 特性 ,内 在 的 特性 好 ,不 一 定 能 胜任 和 完成 用 户 的 任 
务 。 在 定义 中 明确 “满足 规定 或 潜在 用 户 需求 的 能 力 ”, 体 现 了 软件 质量 也 是 关于 软件 特性 
具备 的 “能 力 ”。 在 2001 年 ,软件 产品 质量 评价 国际 标准 ISO 9126 中 定义 的 软件 质量 包括 
“内 部 质量 ”“ 外 部 质量 "和 “使 用 质量 ”三 部 分 。 也 就 是 说 “软件 满足 规定 或 潜在 用 户 需 求 的 
能 力 ” 要 从 软件 在 内 部 、 外 部 和 使 用 中 的 表现 来 衡量 。 

为 满足 软件 的 各 项 规定 的 或 隐 含 的 功能 、 性 能 需求 ,符合 文档 化 开发 标准 ,就 需要 相应 
地 设计 出 一 些 质量 特性 及 其 组 合 , 作 为 在 软件 开发 与 维护 中 的 重要 考虑 因素 。 如 果 这 些 质 
量 特性 及 其 组 合 都 能 在 产品 中 得 到 满足 , 则 这 个 软件 产品 的 质量 就 是 高 的 。 这 些 被 定义 出 
来 的 特性 及 其 组 合 就 称 为 软件 的 “质量 目标 ”。 

从 上 述 软件 质量 的 定义 中 ,反映 出 了 以 下 三 个 方面 的 问题 。 

(1) 软件 需求 是 度量 软件 质量 的 基础 。 不 符合 需求 的 软件 就 不 具备 质量 。 

(2) 软件 人 员 必 须 遵循 软件 过 程 规范 ,用 工程 化 的 方法 来 开发 软件 。 如 果 不 遵 守 这 些 
规程 ,软件 质量 就 没有 保证 。 
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(3) 往往 会 有 一 些 隐 含 的 需求 没有 明确 地 提出 来 。 如 果 软 件 只 是 满足 那些 规定 的 需求 
而 不 可 能 满足 那些 可 能 存在 的 隐 含 需求 ,软件 质量 也 不 能 保证 。 

软件 质量 是 指 与 软件 产品 满足 规定 的 和 隐 含 的 需求 的 能 力 有 关 的 特征 和 特性 的 全 体 。 
概括 地 说 ,软件 质量 就 是 “软件 与 明确 的 和 隐 含 的 定义 的 需求 相 一 致 的 程度 ”。 具 体 地 说 , 软 
件 质量 是 软件 符合 明确 叙述 的 功能 和 性 能 需求 ,文档 中 明确 描述 的 开发 标准 以 及 所 有 专业 
开发 的 软件 都 应 具有 的 隐 含 特征 的 程度 。 

软件 需求 是 度量 软件 质量 的 基础 ,与 需求 不 一 致 就 是 质量 不 高 。 指 定 的 标准 定义 了 一 
组 指导 软件 开发 的 准则 ,如果 没有 遵守 这 些 准 则 ,几乎 肯定 会 导致 质量 不 高 。 通 常 ,有 一 组 
没有 显 式 描述 的 隐 含 需求 (如 期 望 软件 是 容易 维护 的 )。 如 果 软 件 满足 明确 描述 的 需求 ,但 
却 不 满足 隐 含 的 需求 ,那么 软件 的 质量 仍然 是 值得 怀疑 的 。 

软件 质量 是 一 个 软件 企业 成 功 的 必要 条 件 , 其 重要 性 无 论 怎样 强调 都 不 过 分 。 软 件 质 
量 与 传统 意义 上 的 质量 概念 并 无 本 质 差别 ,只 是 针对 软件 的 某 些 特性 进行 了 调整 。 

软件 危机 曾经 是 软件 界 甚至 整个 计算 机 界 最 热门 的 话题 。 为 了 解决 这 场 危机 ,软件 从 
WAR 专家 和 学 者 做 出 了 大 量 的 努力 。 现 在 人 们 已 经 逐步 认识 到 所 谓 的 软件 危机 实际 上 
仅 是 一 种 状况 , 那 就 是 软件 中 有 错误 , 正 是 这 些 错 误导 致 了 软件 开发 在 成 本 、 进 度 和 质量 上 
的 失控 。 有 错 是 软件 的 属性 ,而 且 是 无 法 改变 的 ,因为 软件 是 由 人 来 完成 的 ,所 有 由 人 做 的 
工作 都 不 会 是 完美 无 缺 的 。 问 题 在 于 我 们 如 何 去 避 免 错 误 的 产生 和 消除 已 经 产生 的 错误 ， 
使 程序 中 的 错误 密度 达到 尽 可 能 低 的 程度 。 

软件 测试 在 软件 生命 周期 中 占据 重要 的 地 位 ,在 传统 的 瀑布 模型 中 ,软件 测试 学 仅 处 于 
运行 维护 阶段 之 前 ,是 软件 产品 交付 用 户 使 用 之 前 保证 软件 质量 的 重要 手段 。 近 年 来 ,软件 
工程 界 趋向 于 一 种 新 的 观点 , 即 认为 软件 生命 周期 每 一 阶段 中 都 应 包含 测试 ,从 而 检验 本 阶 
段 的 成 果 是 否 接近 预期 的 目标 , 尽 可 能 早 地 发 现 错误 并 加 以 修正 ,如 果 不 在 早期 阶段 进行 测 
试 ,错误 的 延 时 扩散 常常 会 导致 最 后 成 品 测试 的 巨大 困难 。 


1. 影响 软件 质量 的 主要 因素 


影响 软件 质量 的 主要 因素 是 从 管理 角度 对 软件 质量 的 度量 。 可 划分 为 三 组 : 开发 软件 
的 组 织 、 开 发 过 程 、 开 发 过 程 所 使 用 的 方法 和 技术 ,分 别 反 映 用 户 在 使 用 软件 产品 时 的 三 种 
观点 : 正确 性 ,健壮 性 ,效率 、 完 整 性 、 可 用 性 、 风 险 ( 产 品 运 行 ); 可 理解 性 、 可 维修 性 、 灵 活 
性 、 可 测试 性 (产品 修改 ); 可 移植 性 、 可 再 用 性 、 互 运行 性 (产品 转移 )。 

(1) 性 能 (Performance) 是 指 系统 的 响应 能 力 , 即 要 经 过 多 长 时 间 才 能 对 某 个 事件 做 出 
响应 ,或 者 在 某 段 时 间 内 系统 所 能 处 理 的 事件 个 数 。 在 指定 条 件 下 ,用 软件 实现 某 种 功能 所 
需 的 计算 机 资源 (包括 时 间 ) 的 有 效 程度 。 

(2) 可 用 性 (Availability) 是 指 系统 能 够 正常 运行 的 时 间 比 例 。 

(3) 可 靠 性 (Reliability) 是 指 系统 在 应 用 或 者 错误 面前 ,在 意外 或 者 错误 使 用 的 情况 下 
维持 软件 系统 功能 特性 的 能 力 。 在 规定 的 时 间 和 条 件 下 ,软件 所 能 维持 其 性 能 水 平 的 程度 。 

(4) 健壮 性 (Robustness) 是 指 在 处 理 或 者 环境 中 系统 能 够 承受 的 压力 或 者 变更 能 力 。 

(5) 安全 性 (Security) 是 指 系 统 向 合法 用 户 提供 服务 的 同时 能 够 阻止 非 授 权 用 户 使 用 
的 企图 或 者 拒绝 服务 的 能 力 。 

(6) 可 修改 性 (Modification) 是 指 能 够 快速 地 以 较 高 的 性 能 价格 比 对 系统 进行 变更 的 
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能 力 。 在 一 个 运行 软件 中 , 当 环境 改变 或 软件 发 生 错 误 时 ,进行 相应 修改 所 做 努力 的 
程度 。 

(7) 可 变性 (Changeability) 是 指 体系 结构 扩充 或 者 变更 成 为 新 体系 结构 的 能 力 。 软 件 
从 一 个 计算 机 系统 或 环境 移植 到 另 一 个 系统 或 环境 的 容易 程度 。 

(8) 易 用 性 (Usability) 是 衡量 用 户 使 用 软件 产品 完成 指定 任务 的 难 易 程 度 。 对 于 一 个 
软件 ,用 户 学 习 、 操 作 、 准 备 输入 和 理解 输出 所 做 努力 的 程度 。 

(9) 可 测试 性 CTestability) 是 指 软件 发 现 故障 并 隔离 定位 其 故障 的 能 力 特性 ,以 及 在 一 
定 的 时 间或 者 成 本 前 提 下 进行 测试 设计 、 测 试 执行 能 力 。 

(10) 功能 性 (Function Ability) 是 指 系统 所 能 完成 所 期 望 工作 的 能 力 。 软 件 所 实现 的 
功能 达到 它 的 设计 规范 和 满足 用 户 需 求 的 程度 。 

(11) 互 操作 性 (InterOperation) 是 指 系统 与 外 界 或 系统 与 系统 之 间 的 相互 作用 能 力 。 


2. 软件 开发 


1) 需求 分 析 

确保 客户 所 要 求 的 系统 是 可 行 的 。 

确保 客户 指定 的 需求 确实 能 够 满足 他 的 真正 要 求 。 

避免 开发 者 和 客户 之 间 的 误解 。 

向 用 户 提供 为 满足 他 所 提出 的 需求 而 实际 构建 的 适当 软件 系统 。 
2) 软件 规格 说 明 

通过 建立 需求 跟踪 文档 ,确保 规格 说 明 书 与 系统 需求 保持 一 致 
确保 规格 说 明 书 能 适当 地 改进 系统 的 灵活 性 、 可 维护 性 以 及 性 能 。 
确保 已 建立 了 测试 策略 。 

确保 已 建立 了 现实 的 开发 进度 表 , 包 括 预 定 的 评审 。 

确保 已 为 系统 设计 了 正式 的 变更 规程 。 

3) 设计 

确保 已 建立 用 于 描述 设计 的 标准 ,并 且 确 保 遵 循 这 些 标 准 。 

确保 适当 地 控制 并 用 文档 记录 对 设计 进行 的 变更 。 

确保 在 系统 设计 组 件 已 按照 商定 的 准则 得 到 批准 之 后 才 开始 编码 。 
确保 对 设计 的 评审 按照 进度 进行 。 

确保 代码 遵循 已 建立 的 风格 、 结 构 和 文档 标准 。 

确保 代码 经 过 适当 测试 和 集成 .同时 对 编码 模块 的 修改 得 到 适当 的 标识 。 
查看 代码 编写 是 否 遵 循 既定 的 进度 。 

确保 代码 评审 按照 进度 进行 。 

4) 测试 

确保 测试 计划 的 建立 和 遵循 。 

确保 创建 的 测试 计划 能 够 满足 所 有 系统 规格 说 明 书 的 要 求 。 
确保 经 过 测试 和 返工 后 软件 与 规格 说 明 书 保持 一 致 。 

5) 维护 

确保 代码 和 文档 的 一 致 性 。 
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确保 对 已 建立 的 变更 控制 过 程 进行 监测 ,包括 将 变更 集成 到 软件 的 产品 版 本 中 的 过 程 。 
确保 对 代码 的 修改 遵循 编码 标准 ,并 且 要 对 其 进行 评审 ,不 要 破坏 整个 代码 结构 。 


@3 软件 质量 模型 


从 测量 的 角度 看 ,影响 软件 质量 的 因素 可 以 分 为 两 大 类 : 可 直接 测量 (如 每 个 功能 点 的 
错误 ) 和 间接 度量 (如 可 用 性 、 可 维护 性 )。 每 种 类 型 的 测度 都 必须 发 生 。 

软件 质量 模型 定义 一 个 软件 的 质量 ,等 价 于 为 该 软件 定义 一 系列 质量 特性 。 通 常用 软 
件 质 量 模型 来 描述 影响 软件 质量 的 特性 。 

目前 ,软件 质量 模型 的 研究 主要 分 为 两 个 方向 : 一 是 根据 经 验 提出 软件 质量 模型 ; 二 
是 给 出 一 种 构建 软件 质量 模型 的 方法 。 前 者 主要 是 建立 各 种 通用 的 质量 模型 来 描述 软件 或 
信息 系统 ,从 而 对 软件 的 质量 进行 预测 .度量 以 及 评估 。 后 者 主要 是 提供 了 如 何 建立 质量 模 
型 的 方法 ,包括 如 何 建立 质量 属性 之 间 的 联系 以 及 如 何 分 析 质 量 属性 等 。 

软件 质量 模型 分 为 两 类 : 层次 模型 和 关系 模型 。 其 中 ,比较 著名 的 层次 模型 包括 
McCall 模型 .Boehm 模型 和 ISO 9126 质量 模型 。 这 些 质 量 模 型 用 来 描述 软件 或 者 信息 系 
统 , 从 而 可 以 对 软件 质量 进行 预测 、 度 量 以 及 评估 ,最 终 在 软件 开发 的 整个 生命 周期 ,实施 有 
效 的 质量 保证 的 措施 ,确保 这 些 软 件 质 量 特性 得 以 满足 。 

1. McCall 模型 

早期 的 软件 质量 模型 是 1977 年 McCall 和 他 的 同事 建立 的 ,提出 了 影响 质量 因素 的 有 
用 分 类 。McCall 质量 模型 集中 在 软件 产品 的 三 个 重要 方面 : 操作 特性 (产品 运行 )、 承 受 可 
改变 能 力 (产品 修订 )、 新 环境 适应 能 力 (产品 变迁 ) 。 

McCall 模型 是 最 早 的 质量 模型 之 一 ,属于 层次 模型 的 类 型 , 见 图 2-1。 


可 移植 性 
可 重用 性 
可 互 操 作 性 


可 维护 性 
灵活 性 
可 测试 性 


互 操作 性 


[用 性 


图 2-1 McCall 模 型 


正确 性 
完整 性 
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J. A. McCall 等 人 又 进一步 将 软件 质量 分 解 到 能 够 度量 的 程度 ,提出 FCM 模型 ,该 模 
型 指出 影响 软件 质量 的 几 个 最 主要 的 因素 ,分 为 软件 质量 要 素 (Factor) V ftp fit gie (Criteria) 
和 量度 标准 (Metrics) 三 个 层次 ,这 几 个 因素 又 是 由 一 些 比较 低层 的 如 模块 化 ` 数 据 通用 性 
等 标准 决定 的 ,实际 的 度量 是 针对 这 些 标准 而 言 的 。 该 模型 描述 了 因素 和 它们 所 依赖 的 标 
准 之 间 的 一 致 性 。 具 体内 容 见 表 2-1。 他 们 对 软件 质量 因素 进行 了 研究 ,认为 软件 质量 是 
正确 性 、 可 靠 性 \ 效 率 等 构成 的 函数 ,而 正确 性 、 可 靠 性 ,效率 等 被 称 为 软件 质量 因素 ,或 软件 
质量 特征 , 它 表现 了 系统 可 见 的 行为 化 特征 。 每 一 因素 又 由 一 些 准 则 来 衡量 ,而 准则 是 跟 软 
件 产品 和 设计 相关 的 质量 特征 的 属性 。 例 如 ,正确 性 由 可 跟踪 性 、 完 全 性 、 相 容 性 来 判断 ,每 
一 准则 又 有 一 些 定量 化 指标 来 计量 ,指标 是 捕获 质量 准则 属性 的 度量 。Mc-Call 认为 软件 
质量 可 从 两 个 层次 去 分 析 , 其 上 层 是 外 部 观察 的 特性 ,下 层 是 软件 内 在 的 特性 。McCall 定 
XT 11 个 软件 外 部 质量 特性 , 称 为 软件 的 质量 要 素 , 它 们 是 正确 性 、 可 靠 性 ,效率 、 完 整 性 、 
可 使 用 性 、 可 维护 性 、 可 测试 性 、 灵 活性 、 可 移植 性 、 重 复 使 用 性 和 连接 性 。 同 时 ,还 定义 了 
22 个 软件 的 内 部 质量 特征 , 称 为 软件 的 质量 属性 ,它们 是 完备 性 一致 性 \ 准 确 性 ,容错 性 、 
简单 性 ,模块 性 、 通 用 性 、 可 扩充 性 \ 工 具 性 、 自 描述 性 ,执行 效率 、 存 储 效率 、 存 取 控 制 、 存 取 
审查 、 可 操作 性 、 培 训 性 、 通 信 性 、 软 件 系 统 独立 性 、 机 器 独立 性 、 通 信和 通用 性 、 数 据 通用 性 和 
简明 性 。 软 件 的 内 部 质量 属性 通过 外 部 的 质量 要 素 反映 出 来 。 然 而 ,实践 证 明 以 这 种 方式 
获得 的 结果 会 有 一 些 问题 。 例 如 ,本 质 上 并 不 相同 的 一 些 问题 有 可 能 会 被 当成 同样 的 问题 
来 对 待 ,导致 通过 模型 获得 的 反馈 也 基本 相同 。 这 就 使 得 指标 的 制定 及 其 定量 的 结果 变 得 
难以 评价 。 

表 2-1 Mal 模型 内 容 


层级 名 —W 内 *- 
第 一 层 ”质量 要 素 : 描述 和 评价 软件 质量 功能 性 、 可 靠 性 、 易 用 性 效率 性 、 可 维护 性 、 可 移植 性 等 
的 一 组 属性 质量 特性 ,以 及 将 质量 特性 细 化 产生 的 副 特 性 
第 二 层 ”衡量 标准 : 衡量 标准 的 组 合 ,反映 精确 性 \ 稳 健 性、 安全 性 ,通信 有 效 性 ` 处 理 有 效 性 .设备 有 
某 一 软件 质量 要 素 效 性 \ 可 操作 性 、 培 训 性 ,完备 性 ,一 致 性 ,可 追踪 性 、 可 见 
性 ,硬件 系统 无 关 性 、 软 件 系 统 无 关 性 、 可 扩充 性 ,公用 性 、 
模块 性 ,清晰 性 、 自 描述 性 ,简单 性 、 结 构 性 、 文 件 完备 性 等 
第 三 层 ”量度 标准 : 可 由 各 使 用 单位 自 定义 ”根据 软件 的 需求 分 析 、 概 要 设计 ,详细 设计 编码 测试 、 
确认 维护 与 使 用 等 阶段 ,针对 每 一 个 阶段 制定 问卷 表 ， 
以 此 实现 软件 开发 过 程 的 质量 度量 


2. Boehm 模型 


1978 年 ,Boehm 和 他 的 同事 们 提出 了 分 层 结构 的 软件 质量 模型 , 除 包含 用 户 的 期 望 和 
需要 的 概念 ,这 一 点 与 McCall 相同 之 外 ,还 包括 McCall 模型 中 没有 的 硬件 特性 。Boehm 
模型 始 于 软件 的 整体 效用 ,从 系统 交付 后 涉及 不 同类 型 的 用 户 考虑 。 第 一 种 用 户 是 初始 顾 
客 , 系 统 做 了 顾客 所 期 望 的 事 ,顾客 对 系统 非常 满意 ; 第 二 种 用 户 是 要 将 软件 移植 到 其 他 软 
硬件 系统 下 使 用 的 客户 ; 第 三 种 用 户 是 维护 系统 的 程序 员 。 这 三 种 用 户 都 希望 系统 是 可 靠 
有 效 的 。 因 此 ,Boehm 模型 反映 了 对 软件 质量 的 理解 , 即 软件 做 了 用 户 要 它 做 的 : 有 效 地 使 
用 系统 资源 ; 易于 用 户 学 习 和 使 用 ; 易于 测试 与 维护 。 
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dli Barry W. Boehm) 通 过 将 软件 质量 要 素 分 层 定 义 , 在 《软件 风险 管理 》(Software 
Risk Management) 中 首次 提出 了 软件 质量 度量 的 层次 模型 。Boehm 模型 将 软件 的 质量 特 
性 定义 成 分 层 模型 ,如 图 2-2 所 示 。 在 表达 质量 特征 的 层次 性 上 它 与 McCall 模型 是 非常 
类 似 的。 不 过 , 它 是 基于 更 为 广泛 的 一 系列 质量 特征 . 它 将 这 些 特征 最 终 合并 成 19 个 标 
准 。Boehm 提出 的 概念 的 成 功 之 处 在 于 它 包 含 硬件 性 能 的 特征 ,这 在 McCall 模型 中 是 没 


有 的 。 
设备 独立 性 
自 包含 性 
正确 性 


健壮 性 


DE 1d 


软 
件 
质 


人 类 工程 


可 测试 性 


可 理解 性 


可 修改 性 


图 2-2 Boehm 模型 


3. ISO 9126 模型 


20 世纪 90 年 代 早期 ,软件 工程 组 织 试图 将 诸多 的 软件 质量 模型 统一 到 一 个 模型 中 ,并 
把 这 个 模型 作为 度量 软件 质量 的 一 个 国际 标准 。 国 际 标准 化 组 织 于 1991 年 颁布 了 ISO 
9126—1991 标准 《软件 产品 评价 一 质量 特性 及 其 使 用 指南 》。 我 国 也 于 1996 年 颁发 了 同样 
的 软件 产品 质量 评价 标准 GB/T 16260 一 1996, 它 是 一 个 分 层 质 量 模型 ,有 6 个 影响 质量 的 
特性 。 

标准 的 软件 质量 测度 是 这 样 建立 的 : 软件 质量 模型 分 为 三 个 层次 ,第 一 层 有 6 个 影响 
软件 质量 的 主要 因素 ,在 标准 中 称 为 “质量 特性 ”。 而 每 个 质量 特性 又 可 以 通过 第 二 层 的 若 
干 个 子 特性 测量 ,第 二 层 的 每 个 子 特性 在 评价 时 要 定义 并 实施 若干 个 度量 。 当 时 ,ISO 9126 
资料 性 的 附录 中 给 出 了 21 个 子 特性 

ISO 9126 的 出 发 点 在 于 使 软件 最 大 限度 地 满足 用 户 的 明确 的 和 潜在 的 需求 。 这 6 个 
质量 特性 最 大 可 能 地 涵盖 了 其 他 早期 质量 模型 中 所 有 的 因素 ,而 且 彼此 交叉 最 小 。 软 件 质 
量 特 性 与 子 特性 的 定义 是 从 用 户 的 角度 、 开 发 者 的 角度 和 管理 者 的 角度 全 方位 出 发 考虑 的 。 
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因此 ,ISO 9126—1991 在 当时 是 最 为 先进 、 严 格 的 质量 模型 , 它 划时代 地 统一 了 十 几 年 来 国 
际 上 推出 的 各 种 质量 模型 。 

ISO 9126 质量 模型 是 另 一 个 著名 的 质量 模型 ,如 图 2-3 所 示 。 按 照 ISO/TEC 9126 一 1: 
2001 ,该 软件 质量 模型 可 以 分 为 内 部 质量 和 外 部 质量 模型 .使 用 质量 模型 ,而 质量 模型 中 又 
将 内 部 和 外 部 质量 分 成 6 个 质量 特性 ,这 6 个 质量 特性 还 可 以 再 继续 分 成 更 多 的 子 特征 。 
这 些 子 特征 在 软件 作为 计算 机 系统 的 一 部 分 时 会 明显 地 表现 出 来 ,并 且 会 成 为 内 在 的 软件 
属性 的 结果 。 而 另 一 部 分 则 指定 了 使 用 中 的 质量 属性 ,它们 是 与 针对 6 个 软件 产品 质量 属 
性 的 用 户 效果 联合 在 一 起 的 。 下 面 是 它 给 出 的 软件 的 6 个 质量 特征 。 

(1) 功能 性 (Functionality) : 软件 是 否 满足 了 客户 功能 要 求 。 

(2) 可 靠 性 (Reliability) : 软件 是 否 能 够 一 直 在 一 个 稳定 的 状态 上 满足 可 用 性 。 

(3) 可 用 性 (Usability) : 衡量 用 户 能 够 使 用 软件 需要 多 大 的 努力 。 

(4) HR Efficiency): 衡量 软件 正常 运行 需要 耗费 多 少 物 理 资源 。 

(5) 可 维护 性 (Maintainability) : 衡量 对 已 经 完成 的 软件 进行 调整 需要 多 大 的 努力 。 

(6) 可 移植 性 (Portability) : 衡量 软件 是 否 能 够 方便 地 部 署 到 不 同 的 运行 环境 中 。 
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图 2-3 ISO 9126 软件 质量 度量 模型 


凯 悦 (Lawrence E. Hyatt) 和 罗 森 贝克 (Linda H. Rosenberg) 在 (识别 项 目 风险 以 及 评 
价 软件 质量 的 软件 质量 模型 与 度量 》(A Software Quality Model and Metrics for 
Identifying Project Risks and Assessing Software Quality) 中 比较 了 这 三 种 最 常用 的 软 
件 质 量 模型 ,其 基本 情况 如 表 2-2 所 示 。 
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表 2-2 软件 质量 模型 比较 表 


编号 度量 标准 /目标 麦 考 尔 D ISO 9126 
1 正确 性 (Correctness) x x 可 维护 性 
2 TJ $É tE (Reliability) x x x 
3 完整 性 (Integrity) x x 
4 可 用 性 (Usability) x x X 
5 效率 性 (Efficiency) x x x 
6 可 维护 性 (Maintainability) x x x 
7 可 测试 性 (Testability) x 可 维护 性 
8 互 操作 性 (Interoperability) x 
9 适应 性 (Flexibility) x x. 

10 可 重用 性 (Reusability) x x 

11 可 移植 性 (Portability) x x x 

12 明确 性 (Clarity) » 

13 可 变更 性 (Modifiability) X 可 维护 性 
14 文档 化 (Documentation) x 

15 TK 9 7] (Resilience) x 

16 易 懂 性 (Understandability) X 

17 有 效 性 (Validity) x 可 维护 性 
18 功能 性 (Functionality) x 

19 普遍 性 (Generality) x 

20 经 济 性 (Economy) 


4. 软件 生产 能 力 成 熟 模型 


1993 年 ,由 美国 卡 内 基 梅 隆 大 学 的 软件 工程 研究 所 (SEI) 创立 的 CMM (Capability 
Maturity Model, 软 件 能 力 成 熟 度 模型 ) 认 证 评估 ,在 过 去 的 十 几 年 中 ,对 全 球 的 软件 产业 产 
生 了 非常 深远 的 影响 。 这 是 评估 软件 生产 部 门 (组 织 . 厂 家 ) 软 件 生产 能 力 成 熟 度 的 模型 ,是 
从 软件 生产 组 织 过 程 角度 来 评估 其 达到 的 水 平 级 别 。CMM 描述 了 5 个 级 别 的 软件 过 程 成 
熟 度 (初始 级 、 可 重复 级 \ 已 定义 级 ,已 管理 级 \ 优 化 级 ) ,分 别 标 志 着 软件 企业 能 力 成 熟 度 的 
5 个 层次 ,如 图 2-4 所 示 。 成 熟 度 反 映 了 软件 过 程 能 力 (Software Process Capability) 的 大 
小 ,任何 一 个 软件 机 构 的 软件 过 程 必定 属于 其 中 某 个 级 别 。 

1) 初始 级 

初始 级 (Initial) 的 软件 过 程 是 未 加 定义 的 随意 过 程 ,项 目的 执行 是 随意 甚至 是 混乱 的 。 
也 许 , 有 些 企 业 制 定 了 一 些 软件 工程 规范 ,但 若 这 些 规 范 未 能 覆盖 基本 的 关键 过 程 要 求 , 且 
执行 没有 政策 ,资源 等 方面 的 保证 时 ,那么 它 仍然 被 视 为 初始 级 。 

初始 级 的 特点 是 : 工作 无 序 , 项 目 进 行 过 程 中 常 放弃 开始 制订 的 计划 ; 管理 无 章 ,缺乏 
健全 的 管理 制度 ; 开发 项 目 成 效 不 稳定 ,产品 的 质量 和 性 能 严重 依赖 于 个 人 的 能 力 和 行为 。 

2) 可 重复 级 

根据 多 年 的 经 验 和 教训 ,人 们 总 结 出 软件 开发 的 首要 问题 不 是 技术 问题 而 是 管理 问题 。 
因此 ,第 二 级 的 焦点 集中 在 软件 管理 过 程 上 。 一 个 可 管理 的 过 程 则 是 一 个 可 重复 的 过 程 ,可 
重复 的 过 程 才能 逐渐 改进 和 成 熟 。 可 重复 级 (Repeatable) 的 管理 过 程 包括 需求 管理 项目 
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持续 改善 的 
过 程 优化 级 
可 预言 的 
过 程 已 管理 级 
标准 的 一 致 的 


严格 的 可 重复 级 
过 程 
图 2-4 软件 能 力 成 熟 度 模型 


管理 .质量 管理 .配置 管理 和 子 合 同 管理 5 个 方面 ; 其 中 ,项 目 管理 过 程 又 分 为 计划 过 程 和 
跟踪 与 监控 过 程 。 通 过 实施 这 些 过 程 ,从 管理 角度 可 以 看 到 一 个 按 计划 执行 的 且 阶 段 可 控 
的 软件 开发 过 程 。 

可 重复 级 的 特点 是 : 管理 制度 化 ,建立 了 基本 的 管理 制度 和 规程 ,管理 工作 有 章 可 循 ; 
初步 实现 标准 化 ,开发 工作 较 好 地 实施 标准 ; 变更 均 依 法 进行 ,做 到 基线 化 ; 稳定 可 跟踪 ， 
新 项 目的 计划 和 管理 基于 过 去 的 经 验 , 具 有 重复 以 前 成 功 项 目的 环境 和 条 件 。 

3) 已 定义 级 

在 可 重复 级 定义 了 管理 的 基本 过 程 ,而 没有 定义 执行 的 步骤 标准 。 在 第 三 级 则 要 求 制 
定 企业 范围 的 工程 化 标准 ,并 将 这 些 标准 集成 到 企业 软件 开发 标准 过 程 中 。 所 有 开发 的 项 
目 需 根据 这 个 标准 过 程 ,裁剪 出 与 项 目 适宜 的 过 程 ,并 且 按照 过 程 执 行 。 过 程 的 裁剪 不 是 随 
意 的 ,在 使 用 前 必须 经 过 企业 有 关 人 员 的 批准 。 

已 定义 级 (Defined) 的 特点 是 : 开发 过 程 ,包括 技术 工作 和 管理 工作 , 均 已 实现 标准 化 、 
文档 化 ; 建立 了 完善 的 培训 制度 和 专家 评审 制度 ; 全 部 技术 活动 和 管理 活动 均 稳定 实施 ; 
项 目的 质量 、 进 度 和 费用 均 可 控制 ; 对 项 目 进 行 中 的 过 程 岗 位 和 职责 均 有 共同 的 理解 。 

4) 已 管理 级 

第 四 级 的 管理 是 量化 的 管理 。 所 有 过 程 需 建立 相应 的 度量 方式 ,所 有 产品 的 质量 (包括 
工作 产品 和 提交 给 用 户 的 最 终 产 品 ) 需 要 有 明确 的 度量 指标 。 这 些 度量 应 是 详尽 的 , 且 可 用 
于 理解 和 控制 软件 过 程 和 产品 。 量 化 控制 将 使 软件 开发 真正 成 为 一 种 工业 生产 活动 。 

已 管理 级 (Managed) 的 特点 是 : 产品 和 过 程 已 建立 了 定量 的 质量 目标 ; 过 程 中 活动 的 
生产 率 和 质量 是 可 度量 的 ; 已 建立 过 程 数 据 库 ; 已 实现 项 目 产品 和 过 程 的 控制 ; 可 预测 过 
程 和 产品 质量 趋势 ,如 预测 偏差 ,实现 及 时 纠正 。 

5) 优化 级 

优化 级 (Optimizing) 的 目标 是 达到 一 个 持续 改善 的 境界 。 所 谓 持续 改善 是 指 可 以 根据 
过 程 执 行 的 反馈 信息 来 改善 下 一 步 的 执行 过 程 , 即 优化 执行 步 又。 如果 企业 达到 了 第 5 级 ， 
就 表明 该 企业 能 够 根据 实际 的 项 目 性 质 、 技 术 等 因素 ,不 断 调整 软件 生产 过 程 以 求 达到 
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最 佳 。 

优化 级 的 特点 是 : 可 集中 精力 改进 过 程 , 采 用 新 技术 、 新 方法 ; 拥有 防止 出 现 缺 陷 、 识 
别 薄弱 环节 以 及 加 以 改进 的 手段 ; 可 取得 过 程 有 效 性 的 统计 数据 ,并 可 据 此 进行 分 析 , 从 而 
得 出 最 佳 方法 。 

CMM 的 每 个 等 级 是 通过 三 个 层次 加 以 定义 的 : 关键 过 程 域 . 关 键 实践 类 ,关键 实践 。 

在 框架 的 某 一 “平台 ”上 ,其 实施 将 对 达到 下 一 成 熟 度 等 级 的 目标 起 保证 作用 的 过 程 域 ， 
被 称 为 关键 过 程 域 。 

关键 实践 描述 了 对 关键 过 程 域 的 实施 起 关键 作用 的 方针 规程 措施、 活动 以 及 相关 的 基 
础 设施 。 关 键 实践 的 作用 是 一 个 关键 过 程 域 中 所 包含 的 关键 实践 的 实施 , 才 可 以 达到 该 关 
键 过 程 域 中 的 目标 。 

关键 过 程 域 的 目标 表明 了 一 个 关键 过 程 域 的 范围 .边界 和 意图 。 例 如 ,软件 项 目 规划 是 
2 级 的 一 个 关键 过 程 域 。 其 目标 可 概括 为 : 制定 进行 软件 工程 和 管理 软件 项 目的 合理 计 
划 。 这 些 计 划 是 管理 软件 项 目的 必要 基础 ,促进 按 选 定 的 软件 生存 周期 模型 分 阶段 分 工地 
进行 软件 开发 。 按 阶段 组 织 检查 ,实施 控制 。 具 体 包括 : 软件 生存 周期 已 选 定 , 并 经 评审 确 
认 ; 对 计划 中 的 软件 规模 、 工 作 量 、 成 本 、 风 险 等 已 经 进行 估计 ; 软件 项 目的 活动 和 约定 是 
有 计划 的 ; 影响 计划 进度 的 关键 路 径 是 已 标识 的 且 受 控 的 ; 影响 计划 进度 的 关键 资源 需求 
是 已 标识 的 ; 在 软件 生存 周期 的 里 程 碑 处 ,对 计划 的 执行 有 检查 \ 有 记录 ,问题 有 报告 ;对 
于 介入 软件 开发 计划 的 软件 负责 人 、 软 件 工程 师 和 有 关 人 员 进 行 了 软件 估计 和 计划 方面 的 
培训 ; 选 定 有 可 管理 规模 的 、 预 定 阶段 的 软件 生存 周期 模型 ,如 瀑布 型 \ 增 量 型 .渐进 型 . 螺 
旋 型 .逆向 工程 型 ; 标识 为 控制 软件 项 目 所 必需 的 软件 工作 产品 。 

每 一 级 的 关键 实践 按 * 共 同 特征 子 以 组 织 。 这 些 * 共 同 特征 ?为 : 实施 承诺 一 一 制定 方 
针 政 策 ; 实施 能 力 一 一 确保 必 备 条 件 ; 实施 活动 一 一 实施 软件 过 程 ; 度量 分 析 与 验证 一 一 
检查 实施 情况 。 也 就 是 说 ,每 一 关键 过 程 域 包含 一 组 关键 实践 ,并 按 * 共 同 特征 ?组 织 为 每 一 
级 的 关键 实践 类 一 一 制定 方针 政策 ,确保 必 备 条 件 ,实施 软件 过 程 , 检 查实 施 情 况 。 

关键 过 程 域 .关键 实践 类 .关键 实践 之 间 的 关系 如 图 2-5 所 示 , 就 是 : 实施 软件 过 程 这 
一 关键 实践 类 中 的 关键 实践 ,描述 了 为 建立 过 程 能 力 , 过 程 实施 者 必须 做 些 什么 ; 其 他 关键 
实践 类 中 的 实践 ,作为 一 个 整体 使 实施 软件 过 程 中 的 实践 规范 化 。 

除去 初始 级 以 外 ,其 他 4 级 都 有 若干 个 引导 软件 机 构 改进 软件 过 程 的 要 点 , 称 为 关键 过 
程 域 (Key Process Area,KPA) 。 每 一 个 关键 过 程 域 是 一 组 相关 的 活动 ,成 功 地 完成 这 些 活 
动 ,将 会 对 提高 过 程 能 力 起 重要 作用 。 图 2-6 给 出 了 各 成 熟 度 级 别 对 应 的 关键 过 程 域 。 各 
级 包含 的 关键 过 程 域 如 下 。 

(1) 可 重复 级 : 6 个 。 包 含 软件 配置 管理 ,软件 质量 保证 、 子 合同 管理 项目 跟 踪 和 监 
督 .软件 项 目 规划 、 需 求 管理 。 

(2) 已 定义 级 : 67090 —13 个 。 除 了 可 重复 级 的 关键 过 程 域外 ,还 包括 同行 评审 、 组 
间 协 调 、 软 件 产品 工程 、 集 成 软件 管理 ,培训 管理 ,机 构 过 程 定义 、 机 构 过 程 焦点 。 

G) 已 管理 级 : 13 十 2( 个 )=15 个 。 除 了 已 定义 级 的 关键 过 程 域外 ,还 包括 软件 质量 管 
理 \ 过 程 的 量化 管理 。 

(4) 持续 优化 级 : 15-3010 —18 个 。 除 了 已 管理 级 的 关键 过 程 域外 ,还 包括 过 程 变更 
管理 ,技术 变更 管理 .缺陷 预防 。 
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图 2-6 各 级 包含 的 关键 过 程 域 


第 2 章 软件 质量 


从 低 到 高 ,软件 开发 生产 计划 精度 逐 级 升 高 ,单位 工程 生产 周期 逐 级 缩短 ,单位 工程 成 
本 逐 级 降低 。 据 SEI 统计 ,通过 评估 的 软件 公司 对 项 目的 估计 与 控制 能 力 约 提升 4026 — 
50%; 生产 率 提高 10% ~ 20% ,软件 产品 出 错 率 下 降 超 过 1/3。 

一 般 来 说 ,通过 CMM 认证 的 级 别 越 高 ,其 越 容易 获得 用 户 的 信任 ,在 国内 、 国 际 市 场 上 
的 竞争 力也 就 越 强 。 因 此 ,是 否 能 够 通过 CMM 认证 也 成 为 国际 上 衡量 软件 企业 工程 开发 
能 力 的 一 个 重要 标志 。 

CMM 是 目前 世界 公认 的 软件 产品 进入 国际 市 场 的 通行 证 , 它 不 仅 是 对 产品 质量 的 认 
证 ,更 是 一 种 软件 过 程 改善 的 途径 。 该 模型 被 认为 是 第 一 个 集成 化 的 模型 。 

为 了 以 示 区 别 , 国 内 外 很 多 资料 把 CMM 叫 作 SW-CMM。 目 前 ,SEI 研制 和 保有 的 能 
力 成 熟 度 模型 有 以 下 几 种 。 

CD 软件 集成 能 力 成 熟 度 模型 (Capability Maturity Model Integration( Service Mark), 
CMMI); 

(2) 软件 能 力 成 熟 度 模型 (Capability Maturity Model(r) for Software, SW-CMM) ; 

(3) 人 力 能 力 成 熟 度 模型 (People Capability Maturity Model. P-CMM); 

(4) 软件 采 办 能 力 成 熟 度 模型 (Software Acquisition Capability Maturity Model, SA- 
CMM); 

(5) 系统 工程 能 力 成 熟 度 模型 (Systems Engineering Capability Maturity Model, SE- 
CMM); 

(6) 一 体 化 生产 研制 能 力 成 熟 度 模型 (Integrated Product Development Capability 
Maturity Model. IPD-CMM) 。 

建立 这 些 模 型 的 指导 思想 和 方法 论 都 是 一 样 的 , 即 评估 能 力 ,发 现 问题 帮助 改进 。 

现 有 的 这 些 质 量 模型 总 是 意图 能 够 适用 于 所 有 类 型 的 软件 开发 ,成 为 一 个 通用 的 模型 。 
然而 ,软件 质量 是 非常 复杂 的 ,很 难 定义 出 一 个 能 够 适用 于 所 有 软件 质量 度量 的 模型 。 每 个 
软件 系统 都 有 它 自 己 的 特征 ,因此 在 使 用 质量 模型 时 必须 考虑 各 类 应 用 的 特殊 需求 。 并 且 ， 
由 于 计算 机 应 用 的 飞速 发 展 , 人 们 需要 寻找 不 仅 能 够 在 软件 质量 管理 方面 提供 有 效 帮 助 ,而 
且 还 能 够 对 软件 开发 中 的 其 他 活动 提供 相应 支持 的 质量 模型 。 

总 之 ,以 上 这 些 通用 的 软件 质量 模型 定义 的 标准 被 应 用 于 各 种 软件 ,包括 计算 机 程 
序 和 包含 在 固件 中 的 数据 。 那 些 特征 和 子 特征 为 软件 产品 质量 提供 了 一 致 的 术语 ,并 且 
为 制定 软件 的 质量 需求 和 确定 软件 性 能 的 平衡 点 指定 了 一 个 框架 。 然 而 ,层次 模型 由 一 
些 质量 属性 、 标 准 及 准则 等 构成 ,它们 只 表达 了 质量 属性 之 间 一 些 正面 的 影响 关系 ,对 于 
那些 更 复杂 的 关系 它们 却 无 能 为 力 。 关 系 模型 能 够 表达 质量 属性 之 间 正 面 、 反面 及 中 立 
的 影响 ,但 对 于 一 些 更 为 复杂 的 关系 则 同样 无 法 表达 。 并 且 ,它们 还 有 一 个 相同 的 弱点 ， 
就 是 现 有 的 这 些 质量 模型 总 是 意图 能 够 适用 于 所 有 类 型 的 软件 开发 ,成 为 一 个 通用 的 模 
型 。 然 而 , 正 像 上 文 提 到 的 那样 ,软件 质量 是 非常 复杂 的 ,很 难 定义 出 一 个 能 够 适用 于 所 
有 软件 质量 度量 的 模型 。 每 个 软件 系统 都 有 它 自己 的 特征 ,在 使 用 质量 模型 时 必须 考虑 
各 类 应 用 的 特殊 需求 。 并 且 , 由 于 计算 机 应 用 的 飞速 发 展 ,. 人 们 需要 寻找 不 仅 能 够 在 软 
件 质量 管理 方面 提供 有 效 帮 助 ,而且 还 能 够 对 软件 开发 中 的 其 他 活动 提供 相应 支持 的 质 
量 模 型 。 
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@.4 标准 的 发 展 


随 着 信息 技术 应 用 的 不 断 增长 ,关键 的 计算 机 系统 的 数量 也 在 增长 。 这 些 系 统 包括 安 
全 ,生活 ,经 济 以 及 保密 方面 的 关键 系统 。 这 些 系 统 的 软件 质量 尤其 重要 ,因为 软件 的 故障 
可 能 导致 非常 严重 的 后 果 。 

纵 观 整个 软件 工程 的 历史 ,提高 软件 质量 已 成 为 最 重要 的 目标 。 评 价 软 件 产品 的 质量 
对 获取 和 开发 满足 质量 需求 的 软件 是 不 可 缺少 的 ,各 种 软件 质量 特性 的 相关 重要 性 取决 于 
作为 整体 一 部 分 的 系统 的 任务 和 目标 ,需要 评价 软件 产品 以 判断 其 相关 的 质量 特性 是 否 满 
足 系统 的 需求 。 

到 1999 年 ,国际 软件 工程 标准 化 组 织 将 软件 “产品 评价 ”与 “产品 质量 ”分 为 两 个 标准 :“ 产 
品评 价 ” 注 重 软件 质量 评价 的 支持 和 评价 过 程 ;“ 产 品质 量 ” 注 重 软件 本 身 的 质量 度量 模型 。 

软件 质量 评价 的 基本 部 分 包括 质量 模型 .评价 方法 、 软 件 的 测量 和 支持 工具 。 要 想 开发 好 
的 软件 ,就 要 规定 质量 需求 ,策划 、 实 现 和 控制 软件 质量 保证 过 程 ,应 评价 中 间 产 品 和 最 终 产 
品 。 要 达到 评价 软件 质量 的 目的 ,应 用 有 效 的 度量 方法 测量 软件 的 质量 属性 是 非常 必要 的 。 

GB/T 18905 一 2002(ISO 14598 一 1999)《 软 件 工程 产品 评价 ) 系 列 标准 为 软件 产品 质量 
的 测量 、 评 佑 和 评价 提供 了 方法 。 它 所 描述 的 既 不 是 软件 生产 过 程 的 评价 方法 ,也 不 是 预算 
成 本 的 方法 (软件 产品 的 质量 测量 当然 可 以 用 于 这 两 个 目的 )。 

因为 质量 特性 和 相关 的 度量 不 仅 可 用 于 软件 产品 评价 ,而 且 也 可 用 于 质量 需求 的 定义 
以 及 其 他 用 途 , 国 际 软 件 工程 标准 化 组 织 颁布 了 ISO 14598 一 1999《 软 件 工程 产品 评价 》, 而 
在 2001 年 修订 了 ISO 9126 一 1991 标准 。 

所 以 ,早期 的 GB/T 16260 一 1906(ISO 9126 一 1991)《 软 件 产品 评价 一 质量 特性 及 其 使 
用 指南 ) 已 经 被 两 个 相关 的 由 多 部 分 组 成 的 标准 : GB/T 18905 一 2002 (ISO 14598—1999) 
《软件 工程 产品 评价 》 和 GB/T 16260 一 2003 (ISO 9126 一 2001)《 软 件 工程 产品 质量 》 所 取代 。 


1. GB/T 18905 产品 评价 


1) GB/T 18905 基本 组 成 
GB/T 18905 一 2002《 软 件 工程 产品 评价 》, 该 系列 标准 由 以 下 6 部 分 组 成 。 
GB/T 18905.1 《软件 工程 ”产品 评价 》 第 1 部 分 概述 
GB/T 18905.2 《软件 工程 ”产品 评价 》 第 2 部 分 策划 和 管理 
GB/T 18905.3 《软件 工程 ”产品 评价 》 第 3 部 分 开发 者 用 的 过 程 
GB/T 18905.4 《软件 工程 产品 评价 》 第 4 部 分 需 方 用 的 过 程 
GB/T 18905.5 《软件 工程 ”产品 评价 》 第 5 部 分 评价 者 用 的 过 程 
GB/T 18905.6 《软件 工程 ”产品 评价 》 第 6 部 分 评价 模块 的 文档 编制 
2) 评价 者 用 的 过 程 (GB/T 18905. 5) 
(1) 开发 者 用 的 过 程 
计划 开发 新 产品 或 增强 现 有 的 产品 ,以 及 打算 利用 他 们 自己 的 技术 人 员 进 行 产品 评价 
的 组 织 应 使 用 GB/T 18905. 3。 这 部 分 主要 强调 使 用 那些 能 预测 最 终 产品 质量 的 指标 ,这 
些 指标 将 通过 虚 盘 在 生存 期 期 间 开 发 的 中 间 产 品 得 到 。 
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(2) 需 方 用 的 过 程 

计划 获取 或 受用 某 个 已 有 的 软件 产品 或 预先 开发 的 软件 产品 的 组 织 , 应 使 用 GB/ T 
18905. 4。 该 部 分 可 用 来 决定 接受 产品 或 者 从 众多 可 选 产品 中 选择 某 个 产品 (产品 可 以 是 自 
包含 的 ,或 是 系统 的 一 部 分 ,或 者 是 较 大 产品 的 一 部 分 )。 

(3) 评价 者 用 的 过 程 

对 软件 产品 执行 独立 评估 的 评价 者 应 使 用 GB/T 18905. 5。 这 种 评价 是 应 开发 者 、 需 
方 或 其 他 方 的 请 求 来 进行 的 。 这 部 分 将 由 那些 执行 独立 评价 的 人 员 使 用 ,他 们 通常 为 第 三 
方 组 织 工作 。 

3) 关于 评价 支持 

(1) 策划 与 管理 

GB/T 18905. 2 为 策划 和 管理 部 分 ,包含 对 软件 产品 评价 的 支持 功能 的 需求 和 指南 。 
这 些 支 持 与 策划 和 管理 软件 评价 过 程 及 相关 的 活动 有 关 , 包 括 组 织 内 评价 专业 知识 的 开发 、 
获取 、 标 准 化 ,控制 转换 和 反馈 。 

(2) 评价 模块 

GB/T 18905. 6 为 编制 评价 模块 的 文档 提供 指南 。 这 些 模块 包括 质量 模型 的 规范 ( 即 
特性 、 子 特性 和 相应 的 内 部 或 外 部 度量 ) ,与 模型 计划 的 应 用 有 关 的 数据 、 信 息 和 与 模型 的 实 
际 应 用 有 关 的 信息 。 

4) 通用 评价 过 程 

软件 产品 的 一 般 评价 过 程 是 : 确立 评价 需求 ,然后 规定 .设计 与 执行 评价 ,如 图 2-7 所 示 。 


一 | 确立 评价 目的 


确立 评价 需求 确定 产品 类 型 


指定 质量 模型 |a]. 16260.1 质量 度 最 
| 定 质量 J 


[anen |__| 16260.2 外 部 度量 


1 — 16260.3 内 部 度量 
.6 评价 模块 
mewn HH 建立 度量 评定 等 级 La las 
L| 确立 评估 准则 
1 
设计 评价 上 一 指定 评价 计划 
进行 度量 
1 
mm 与 评估 准则 相 比较 
评估 结果 


图 2-7 软件 评价 过 程 
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5) 评价 需求 

软件 质量 评价 的 目的 是 为 了 直接 支持 开发 和 获得 能 满足 用 户 和 消费 者 要 求 的 软件 。 最 
终 目标 是 保证 产品 能 提供 所 要 求 的 质量 , 即 满足 用 户 (包括 操作 者 、 软 件 结果 的 接受 者 或 软 
件 的 维护 者 ) 明 确 和 隐 含 的 要 求 。 

(1) 评价 中 间 产 品质 量 的 目的 

(D 决定 (是 否 ) 接 受 分 包 商 交付 的 中 间 产 品 ; 

@ 决定 某 个 过 程 的 完成 ,以 及 何 时 把 产品 送 交 下 一 个 过 程 ; 

© 预计 或 估计 最 终 产品 的 质量 ; 

@ 收集 中 间 产 品 的 信息 以 便 控 制 和 管理 过 程 。 

(2) 评价 最 终 产 品质 量 的 目的 

(D 决定 (是 否 ) 接 受 产 品 ; 

@ 决定 何 时 发 布 产品 ; 

@ 与 相互 竞争 的 产品 进行 比较 ; 

@ 从 众多 可 选 的 产品 中 选择 一 种 产品 ; 

C) 使 用 产品 时 评估 产品 积极 和 消极 的 影响 ; 

© 决定 何 时 增强 或 蔡 换 该 产品 。 

6) 确定 要 评价 产品 的 类 型 

要 评价 的 中 间或 最 终 软件 产品 的 类 型 取决 于 所 处 的 生存 周期 的 阶段 和 评价 的 目的 ,如 
图 2-8 所 示 o 


mt ke- umu 操作 

真实 世界 m orm | p 外 部 度量 
J 

规格 说 明 ( 指示 。“】 系统 集成 和 测试 


1 
系统 行为 | _= | 外 部 质量 要 求 上 -| 外 部 质量 | = 一 外 部 度量 
确定 ww | ) 


设计 和 开发 | "m 
软件 属性 内 部 质量 要 求 |*-- 内 部 质量 | | | 内 部 度量 
验证 


2-8 软件 生存 周期 中 的 质量 


7) 质量 之 间 的 关系 

质量 之 间 的 关系 如 图 2-9 所 示 。 

将 软件 的 内 部 质量 属性 与 外 部 质量 需求 联系 起 来 是 十 分 重要 的 ,使 得 开发 中 的 软件 产 
品 ( 中 间 和 最 终 的 软件 产品 ) 的 质量 特性 可 以 根据 最 终 系统 使 用 质量 需求 来 进行 评估 。 内 部 
质量 的 值 很 低 ,除非 有 证 据 表明 它 与 外 部 质量 有 关 。 
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实际 使 用 的 度量 上 < 测量 一 [使 用 质量 
m 

mitan] Mu 2 heme] 
Mim. ^^ 
fe s 


软件 的 内 部 质量 全 测量 一 [软件 的 内 部 性 质 


图 2-9 质量 之 间 的 关系 


8) 规定 质量 模型 

软件 评价 所 用 的 质量 模型 通常 代表 软件 质量 属性 的 总 体 , 这 些 质量 属性 用 特性 和 子 特 
性 的 分 层 树 结构 进行 分 类 。 该 结构 的 最 高 级 由 质量 特性 构成 ,最 低级 由 软件 质量 属性 构成 。 
GB/T 16260. 1 提供 一 个 通用 模型 , 它 定义 了 6 种 软件 质量 特性 ,包括 功能 性 、 可 靠 性 、 易 用 


性 ,效率 .可 维护 性 和 可 移植 性 ,如 图 2-10 Bros. 


Ul gei un 


内 部 属性 特性 外 部 属性 
图 2-10 质量 特性 . 子 特性 和 属性 


软件 产品 的 内 部 质量 属性 是 软件 产品 的 可 测量 的 性 质 , 这 些 性 质 影响 产品 满足 明确 和 
隐 含 要 求 的 能 力 , 可 以 用 一 个 或 更 多 的 属性 来 评估 一 个 特定 的 软件 质量 特性 或 子 特 性 。 

9) 规定 评价 

(1) 选择 度量 

质量 特性 的 定义 方式 不 允许 对 它们 进行 直接 测量 。 需 要 建立 与 软件 产品 特性 相关 的 度 
量 。 与 某 个 质量 特性 相关 的 每 个 可 量化 的 软件 内 部 属性 和 每 个 可 量化 的 软件 外 部 属性 ,与 
其 软件 环境 进行 相互 作用 ,能 被 确立 为 一 种 度量 。 

质量 可 以 随 环境 和 应 用 度量 的 开发 过 程 阶段 的 不 同 而 有 所 区 别 , 用 于 开发 过 程 的 度量 
应 与 用 户 观点 的 度量 有 关 , 因 为 从 用 户 视角 出 发 的 度量 是 至 关 重 要 的 。 

(2) 测量 的 种 类 

评价 有 两 个 主要 目的 : 确定 问题 以 便 解决 问题 ; 与 可 蔡 代 的 产品 进行 比较 ,或 对 照 需 
求 比较 产品 质量 。 


(3) 确 定 度量 评价 等 级 
可 量化 的 特征 可 以 用 度量 质量 的 方法 进行 定量 的 测量 。 其 结果 是 ,将 测量 值 映射 到 某 
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一 标 度 上 。 这 个 值 本 身 并 不 表示 满意 的 等 级 ,因此 ,这 一 标 度 必须 根据 需求 的 不 同 满意 度 级 
别 分 为 不 同 的 范围 。 例 如 ,将 标 度 分 成 两 类 : 满意 和 不 满意 。 将 标 度 分 成 4 类 : 针对 已 有 产 
品 或 可 蔡 换 产品 的 当前 级 、 最 差 缓和 计划 级 划分 成 4 类 , 即 超出 要 求 ,目标 范围 .可 接受 的 最 
低 限 度 ,不 可 接受 。 定 义 当 前 级 是 为 控制 新 系统 不 因 当前 状况 而 恶化 ; 计划 级 是 指 一 旦 资 
源 可 利用 ,产品 即 可 获得 ; 最 差 级 是 指 万 一 产品 不 符合 计划 级 时 用 户 的 可 接受 边界 ,如 
图 2-11 所 示 。 


超出 要 求 
计划 级 
测量 值 
满意 
当前 级 
可 接受 的 最 低 限度 
最 差 情况 3 
不 可 接受 不 满意 
2 
测量 标 度 评定 等 级 


图 2-11 度量 的 等 级 


(4) 确定 评估 准则 

软件 质量 需求 规格 说 明 应 使 用 定义 良好 的 .适当 的 质量 模型 来 表示 。 为 此 ,除非 有 特殊 
原因 需 使 用 其 他 模型 外 ,应 使 用 GB/T 16260. 1 中 的 质量 模型 和 定义 。 

为 了 评估 产品 质量 ,需要 总 结 针对 不 同 特性 的 评价 结果 。 评 价 者 应 为 此 准备 一 个 规程 ， 
其 中 ,对 不 同 的 质量 特性 使 用 不 同 的 评价 准则 ,每 个 质量 特性 又 以 数 个 子 特 性 或 子 特性 的 加 
权 组 合 来 说 明 ,规程 通常 还 包括 时 间 和 成 本 等 有 助 于 在 特定 环境 下 评估 软件 产品 质量 的 其 
他 方面 。 


2. GB/T 16201.1 产品 质量 


1) 基本 组 成 

GB/T 16260 一 2003《 软 件 工程 产品 质量 》, 该 系列 标准 由 以 下 4 部 分 组 成 。 

GB/T 16260.1 《软件 工程 品质 量 )》 第 1 部 分 质量 模型 

GB/T 16260.2 《软件 工程 产品 质量 ) 第 2 部 分 外 部 质量 

GB/T 16260.3 《软件 工程 ”产品 质量 》 第 3 部 分 内 部 质量 

GB/T 16260.4 《软件 工程 ”产品 质量 ) 第 4 部 分 使 用 质量 度量 

2) 标准 概述 

(1) 标准 的 变化 

国际 上 对 ISO 9126 进行 了 修订 ,保留 了 原来 的 6 个 软件 质量 特性 ,定义 了 一 个 通用 的 
质量 模型 ,并 给 出 了 度量 的 例子 ,与 原 标准 相 比 ,其 主要 区 别 在 于 : 

(D 质量 特性 中 增加 了 使 用 质量 特性 ; 

© 质量 度量 分 为 外 部 度量 、 内 部 度量 和 使 用 质量 度量 ; 
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@ 子 特 性 作为 标准 的 一 部 分 ,在 原版 标准 资料 性 附录 中 的 子 特性 基础 上 增加 了 一 些 ; 

@ 删除 了 评价 过 程 内 容 (已 在 ISO 14598 中 进行 了 说 明 ); 

© 与 ISO 14598 的 内 容 基本 协调 。 

(2) 标准 之 间 的 关系 

GB/T 18905. 1 概述 是 产品 评价 标准 的 总 则 ,GB/T 16260 的 评价 过 程 与 度量 是 遵循 
GB/T 18905 的 。GB/T 18905 和 GB/T 16260 系列 标准 之 间 的 关系 如 图 2-12 所 示 。 


(=) 
(=) 


内 部 度量 | pe (15 uua 


GB/T 18905.1 jh) | 概述 


GB/T|16260.1 质量 模型 


16260.3 | 16260.2 16260.4 


Æ 2-12 GB/T 18905 # GB/T 16260 系列 标准 之 间 的 关系 


3) 标准 的 范围 

标准 可 从 软件 的 获取 、 需 求 .开发 .使 用 .评价 支持 、 维 护 、 质 量 保证 和 审核 相关 的 不 同 
观点 来 确定 和 评价 软件 产品 的 质量 。 可 以 被 开发 者 . 需 方 .质量 保证 人 员 和 独立 评价 者 , 特 
别 是 那些 对 确定 和 评价 软件 产品 质量 负责 的 人 员 所 使 用 。 

本 标准 中 定义 的 质量 模型 使 用 实例 是 : 

(1) 确定 需求 定义 的 完整 性 ; 

(2) 确定 软件 需求 ; 

(3) 确定 软件 设计 目标 ; 

(4) 确定 软件 测试 目标 ; 

(5) 确定 质量 保证 准则 ; 

(6) 为 完整 的 软件 产品 确定 验收 准则 。 

软件 质量 标准 还 可 以 和 软件 质量 保证 过 程 ,以 及 软件 过 程 改 进 有 关 的 标准 一 起 使 用 。 

4) 质量 模型 框架 

(1) 软件 质量 特性 与 度量 

(D 质量 特性 和 子 特性 ; 

Q 外 部 度量 ; 

@ 内 部 度量 。 

GB/T 16260. 1 定义 了 质量 特性 、 相 关 的 子 特性 以 及 GB/T 16260 质量 模型 上 面 三 层 之 
间 的 关系 。GB/T 16260. 2 和 GB/T 16260. 3 确定 了 每 种 度量 (外 部 和 内 部 的 ) 与 其 相应 的 
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特性 和 子 特性 之 间 的 关系 。 注 意 , 某 些 内 部 度 ee ETT 
量 有 对 应 的 外 部 度量 。 软 件 质量 特性 与 度量 如 
图 2-13 所 示 。 [ 
(2) 质量 途径 2. 外 部 度量 | ------- 一 | 3. 内 部 度量 
新 版 GB/T 16260 的 用 户 质 量 要 求 包括 : 233 ”软件 质量 特性 与 度量 


在 特定 的 使 用 环境 和 条 件 下 对 使 用 质量 的 需 
求 ,而 在 规定 外 部 质量 和 内 部 质量 的 特性 和 子 特性 时 也 可 以 使 用 这 些 需 求 。 

软件 产品 质量 可 以 通过 测量 内 部 属性 ,或 者 测量 外 部 属性 ,或 者 测量 使 用 质量 的 属性 来 
评价 ,目标 就 是 使 产品 在 特定 的 使 用 环境 和 条 件 下 具有 所 需 的 效用 。 生 存 周期 的 质量 途径 
如 图 2-14 所 示 。 


软件 产品 的 效用 


[ 
过 程 测量 内 部 测量 外 部 测量 使 用 质量 
的 测量 


图 2-14 生存 周期 的 质量 途径 
过 程 质量 有 助 于 提高 产品 质量 ,而 提高 产品 质量 有 助 于 提高 使 用 质量 ,因此 ,评估 和 改 
善 过 程 是 提高 产品 质量 的 一 种 手段 ,而 评价 和 改进 产品 质量 是 提高 使 用 质量 的 一 种 方法 。 
同样 ,评价 使 用 质量 可 以 为 改进 产品 提供 反馈 ,而 评价 产品 则 可 以 为 改善 过 程 提供 反馈 。 适 
当 的 软件 内 部 属性 是 获得 所 需 外 部 特性 的 先决 条 件 ; 而 适当 的 外 部 特性 是 获得 使 用 质量 的 


先决 条 件 。 
软件 产品 质量 需求 包括 内 部 质量 .外 部 质量 和 使 用 质量 的 评估 准则 ,以 满足 开发 者 、 维 
护 者 .需求 方 以 及 最 终 用 户 的 需求 。 


(3) 产品 质量 和 生存 周期 

内 部 质量 、 外 部 质量 和 使 用 质量 的 观点 在 软件 生存 周期 中 是 变化 的 。 

在 软件 生存 周期 的 不 同 阶段 存在 着 关于 产品 质量 和 相关 度量 的 不 同 观点 。 软 件 生存 周 
期 的 质量 如 图 2-15 所 示 。 


DI SEEN 使 用 
ER 使 用 和 反馈 质量 

| 有 助 于 确定 | 指示 
外 部 质量 |. 00 0 21. 一 | ^m 
Wok 确认 质量 

| 有 助 于 确定 | 指示 
内 部 质量 | 00 00  - s| 内 部 
需求 验证 质量 


2-15 ”软件 生存 周期 的 质量 
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CD 用 户 的 质量 要 求 

可 按 使 用 质量 的 度量 、 外 部 度量 或 内 部 度量 来 规定 质量 需求 。 当 验证 产品 时 ,这 些 由 质 
量规 定 的 需求 应 作为 准则 使 用 。 

© 外 部 质量 要 求 

从 外 部 观点 来 规定 必需 的 质量 级 别 ,包括 来 源 于 用 户 质量 要 求 ( 使 用 质量 要 求 )。 外 部 
质量 需求 用 作 不 同 开发 阶段 的 验证 目标 。 

@ 内 部 质量 要 求 

内 部 质量 需求 是 从 产品 的 内 部 观点 来 规定 必需 的 质量 水 平 。 内 部 质量 需求 用 来 规定 中 
间 产 品 的 属性 ,包括 静态 的 和 动态 的 模型 .其 他 的 文档 和 源 代码 。 内 部 质量 需求 可 用 作 不 同 
开发 阶段 的 验证 目标 。 

CD 使 用 质量 

使 用 质量 是 从 用 户 观 点 出 发 ,来 看 待 软件 产品 用 于 特定 环境 和 条 件 下 的 质量 , 它 测量 用 
户 在 特定 环境 中 达到 其 任务 目标 的 程度 ,而 不 是 测量 软件 自身 的 性 质 。 

© 外 部 质量 

外 部 质量 是 从 外 部 观点 出 发 的 软件 产品 特性 的 总 体 。 它 是 当 软 件 执 行 时 ,更 典型 地 使 
用 外 部 度量 在 模拟 环境 中 ,用 模拟 数据 测试 时 所 被 测量 和 评价 的 质量 。 

© 内 部 质量 

内 部 质量 是 从 内 部 观点 出 发 的 软件 产品 特性 的 总 体 , 内 部 质量 是 针对 内 部 质量 需求 被 
测量 和 评价 的 质量 。 

5) 外 部 质量 和 内 部 质量 的 质量 模型 

外 部 质量 和 内 部 质量 的 质量 模型 软件 ,其 质量 属性 划分 为 6 种 特性 (功能 性 、 可 靠 性 、 易 
用 性 ,效率 ,维护 性 和 可 移植 性 ) ,并 进一步 细 分 为 一 些 子 特性 。 外 部 质量 和 内 部 质量 的 质量 


模型 如 图 2-16 所 示 。 
外 部 质量 和 
内 部 质量 


x jen]. [mene 


功能 性 可 靠 性 易 用 性 


适合 性 成 熟 性 易 理解 性 | | 时 间 特性 | | 易 分 析 性 
准确 性 容错 性 易学 性 | | 资源 利用 性 | | 易 改变 性 
互 操作 性 | | 易 恢复 性 | | 易 操作 性 | | 效率 依 
保密 安全 性 | | 可 靠 依从 性 | | 吸引 性 
功能 依从 性 | 易 用 依从 性 


图 2-16 外 部 质量 和 内 部 质量 的 质量 模型 


(1) 功能 性 

功能 性 是 指 当 软件 在 指定 条 件 下 使 用 时 ,软件 产品 满足 明确 和 隐 含 要 求 功能 的 能 力 。 
适合 性 

适合 性 指 软件 产品 为 指定 的 任务 和 用 户 目标 提供 一 组 合适 的 功能 的 能 力 。 


ç 
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© 准确 性 

准确 性 指 软件 产品 提供 具有 所 需 精 度 的 正确 或 相符 的 结果 或 效果 的 能 力 。 

© 互 操作 性 

互 操作 性 指 软 件 产品 与 一 个 或 更 多 的 规定 系统 进行 交互 的 能 力 。 

D 保密 安全 性 

保密 安全 性 指 软 件 产 品 保护 信息 和 数据 的 能 力 , 以 使 未 授权 的 人 员 或 系统 不 能 阅读 或 
修改 这 些 信息 和 数据 ,但 不 拒绝 授权 人 员 或 系统 对 它们 的 访问 。 

© 功能 依从 性 

功能 依从 性 指 软 件 产品 依附 于 同 功能 性 相关 的 标准 、 约 定 或 法 规 以 及 类 似 规定 的 能 力 。 

(2) 可 靠 性 

CD 成 熟 性 

成 熟 性 指 软件 产品 避免 因 软件 中 错误 的 发 生 而 导致 失效 的 能 力 。 

@ 容错 性 

容错 性 指 软 件 发 生 故 障 或 者 违反 指定 接口 的 情况 下 ,软件 产品 维持 规定 的 性 能 级 别 的 
能 力 。 

© 易 恢复 性 

易 恢 复 性 指 在 失效 发 生 的 情况 下 ,软件 产品 重建 规定 的 性 能 级 别 并 恢复 受 直接 影响 的 
数据 的 能 力 。 

@ 可 靠 依从 性 

可 靠 依从 性 指 软件 产品 依附 于 同 可 靠 性 相关 的 标准 、 约 定 或 规定 的 能 力 。 

(3) 易 用 性 

D 易 理 解 性 

易 理 解 性 指 软件 产品 使 用 户 能 理解 软件 是 否 合适 以 及 如 何 能 将 软件 用 于 特定 的 任务 和 
使 用 环境 的 能 力 。 

@ 易学 性 

易学 性 指 软件 产品 使 用 户 能 学 习 它 的 能 力 。 

© 易 操作 性 

易 操 作 性 指 软件 产品 使 用 户 能 操作 和 控制 它 的 能 力 。 

@ 吸引 性 

吸引 性 指 软件 产品 吸引 用 户 的 能 力 。 

© 易 用 依从 性 

易 用 依从 性 指 软件 产品 依附 于 同 易 用 性 相关 的 标准 、 约 定 、 风 格 指南 或 规定 的 能 力 。 

(4) 效率 

CD 时 间 特 性 

时 间 特 性 指 在 规定 条 件 下 ,软件 产品 执行 其 功能 时 ,提供 适当 的 响应 和 处 理 时 间 以 及 天 
吐 率 的 能 力 。 

@ 资源 利用 性 

资源 利用 性 指 在 规定 条 件 下 ,软件 产品 执行 其 功能 时 ,使 用 合适 的 数量 和 类 型 的 资源 的 
能 力 。 
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@ 效率 依从 性 
效率 依从 性 指 软件 产品 依附 于 同 效 率 相关 的 标准 或 约定 的 能 力 。 
(5) 维护 性 


维护 性 指 软件 产品 可 被 修改 的 能 力 。 修 改 可 能 包括 修正 改进 或 软件 适应 环境 .需求 和 
功能 规格 说 明 中 的 变化 。 

QD 易 分 析 性 

易 分 析 性 指 软件 产品 诊断 软件 缺陷 或 失效 原因 ,以 及 判定 待 修改 的 部 分 的 能 力 。 

@ 易 改 变性 

易 改 变性 指 软件 产品 使 指定 的 修改 可 以 被 实现 的 能 力 。 

@ 稳定 性 

稳定 性 指 软件 产品 避免 由 于 软件 修改 而 造成 意外 结果 的 能 力 。 

@ 易 测试 性 

易 测试 性 指 软 件 产品 使 已 修改 软件 能 被 确认 的 能 力 。 

© 维护 依从 性 

维护 依从 性 指 软件 产品 依附 于 同 维护 性 相关 的 标准 或 约定 的 能 力 。 

(6) 可 移植 性 

(D 适应 性 

适应 性 指 软件 产品 无 须 采用 有 别 于 为 考虑 该 软件 的 目的 而 准备 的 活动 或 手段 ,就 可 能 
适应 不 同 的 指定 环境 的 能 力 。 

Q 易 安 装 性 

易 安 装 性 指 软件 产品 在 指定 环境 中 被 安装 的 能 力 。 

© 共存 性 

共存 性 指 软件 产品 在 公共 环境 中 同 与 其 分 享 公共 资源 的 其 他 独立 软件 共存 的 能 力 。 

© 5 PE 

易 蔡 换 性 指 软件 产品 在 环境 相同 .目的 相同 的 情况 下 替代 另 一 个 指定 软件 产品 的 能 力 。 

© 可 移植 性 依从 性 

可 移植 性 依从 性 指 软件 产品 依附 于 同 可 移植 性 相关 的 标准 或 约定 的 能 力 。 

6) 使 用 质量 的 质量 模型 

使 用 质量 是 从 用 户 角 度 看 待 的 质量 ,其 属性 分 为 4 种 , 即 有 效 性 生产率 、 安 全 性 和 满意 
度 。 使 用 质量 的 质量 模型 如 图 2-17 所 示 。 


使 用 质量 


有 效 性 生产 率 安全 性 满意 度 


图 2-17 使 用 质量 的 质量 模型 


CD 有 效 性 
有 效 性 指 软 件 产品 在 指定 的 环境 下 ,使 用 户 获得 满足 准确 度 和 完整 性 要 求 的 规定 目标 
的 能 力 。 
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(2) 生产 率 

生产 率 指 软件 产品 在 指定 的 使 用 环境 下 ,使 用 户 可 使 用 与 获得 的 有 效 性 有 关 的 合适 数 
量 资 源 的 能 力 。 

(3) 安全 性 

安全 性 指 软件 产品 在 指定 使 用 环境 下 ,获得 可 接受 的 对 人 类 、 事 务 软件、 财产 或 环境 有 
害 的 风险 级 别 的 能 力 。 

(4) 满意 度 

满意 度 指 软件 产品 在 指定 使 用 环境 下 使 用 户 满意 的 能 力 。 


@.5 软件 质量 与 软件 测试 


软件 质量 是 贯穿 软件 生存 期 的 一 个 极为 重要 的 问题 ,是 软件 开发 过 程 中 所 使 用 的 各 种 
开发 技术 和 验证 方法 的 最 终 体现 。 因 此 ,在 软件 生存 期 中 要 特别 重视 质量 的 保证 ,以 生成 高 
质量 的 软件 产品 。 

软件 质量 是 一 个 软件 企业 成 功 的 必要 条 件 ,其 重要 性 无 论 怎样 强调 都 不 过 分 。 软 件 质 
量 与 传统 意义 上 的 质量 概念 并 无 本 质 差 别 , 只 是 针对 软件 的 某 些 特性 进行 了 调整 。 

软件 质量 由 以 下 三 部 分 构成 。 

CD 软件 产品 的 质量 , 即 满足 使 用 要 求 的 程度 。 

(2) 软件 开发 过 程 的 质量 , 即 能 否 满足 开发 所 带 来 的 成 本 、 时 间 和 风险 等 要 求 。 

(3) 软件 在 其 商业 环境 中 所 表现 的 质量 。 

总 结 起 来 ,高 品质 软件 应 该 是 相对 的 无 产品 缺陷 或 只 有 极 少 量 的 缺陷 , 它 能 够 准时 递交 
给 客户 ,所 花费 用 都 在 预算 内 ,并且 满 足 客 户 需求 ,是 可 维护 的 。 但 是 ,有 关 质 量 好 坏 的 最 终 
评价 依赖 于 用 户 的 反馈 。 

软件 质量 具有 以 下 三 个 特性 。 

CD 可 说 明 性 ; 用 户 可 以 基于 产品 或 服务 的 描述 和 定义 加 以 使 用 。 

(2) 有 效 性 : 产品 或 服务 对 于 客户 的 需求 是 否 能 保持 有 效 , 如 具有 99. 99% 有 效 性 ,可 
以 说 达到 质量 要 求 。 

CD 易 用 性 : 对 于 用 户 .产品 或 服务 非常 容易 使 用 并 且 一 定 是 非常 有 用 的 功能 。 

软件 质量 正确 的 内 涵 包括 三 方面 ,完整 的 需求 .正确 的 代码 和 最 少 的 缺陷 。 软 件 测试 就 
是 在 软件 开发 的 整个 生命 周期 中 对 这 三 方面 进行 有 效 控制 的 重要 手段 ,是 软件 质量 的 安全 
副 驾 驶 。 据 统计 ,通过 必要 测试 ,软件 缺陷 数 可 至 少 降低 75 ,而 软件 的 投资 回报 率 能 达 
到 350%。 

然而 ,在 软件 测试 的 早期 ,人 们 却 远 远 没有 意识 到 其 对 质量 控制 的 重要 性 。 那 时 的 测试 
等 同 于 “调试 ”, 目 的 仅仅 是 纠正 软件 中 已 经 知道 的 故障 , 常 由 开发 人 员 自 己 完成 ,对 测试 的 
精力 投入 较 少 ,介入 时 间 也 较 晚 。 随 着 IT 业 的 蓬勃 发 展 ,软件 越 来 越 趋向 大 型 化 .高 复杂 
JE ,软件 质量 问题 逐步 加 剧 ,软件 测试 开始 被 企业 所 重视 。 软 件 测试 的 过 程 也 由 最 初 的 后 期 
调试 上 升 到 软件 开发 全 生命 周期 的 质量 控制 ,测试 的 重要 性 和 规范 性 也 不 断 提高 。 在 信 产 
部 关于 计算 机 系统 集成 资质 及 信息 系统 工程 监理 资质 的 认证 中 ,软件 测试 能 力 已 被 定 为 评 
价 公司 技 术 能 力 的 一 项 重要 指标 。“ 以 测 代 评 ”也 成 为 我 国 科 技 项 目 择优 支持 的 一 项 重要 举 
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措 , 据 悉 国 家 “863” 计 划 对 数据 库 管理 系统 、 操 作 系 统 、 办 公 软 件 等 项 目的 经 费 支 持 , 都 要 通 
过 专业 机 构 的 测试 结果 来 决定 。 

除 此 以 外 ,软件 测试 的 方式 也 开始 由 手工 向 自动 化 测试 方向 转变 ,测试 工具 包括 白 盒 、 
黑 盒 . 戏 和 人 式 等 七 大 类 。 软 件 测试 的 蓬勃 发 展 在 促进 质量 提升 的 同时 ,也 将 软件 产业 带 进 发 
展 的 新 时 代 。 信 产 部 信息 产品 管理 司 处 长 孙 文 龙 曾经 强调 , 信 产 部 将 把 软件 产品 的 功能 测 
试 作 为 下 阶段 发 展 的 重要 内 容 , 而 培养 专业 的 人 才 又 是 重 中 之 重 。 

把 软件 质量 依赖 于 测试 ,是 不 可 能 真正 解决 软件 质量 问题 的 。 

测试 不 是 解决 错误 的 根本 举措 ,只 是 一 种 辅助 手段 。 但 又 是 必需 的 手段 。 

软件 测试 的 首要 任务 是 发 现 错误 。 发 现 错误 也 许 要 花 很 大 的 代价 。 因 为 测试 是 复杂 
的 ,不 存在 好 的 办 法 使 每 次 测试 都 是 有 效 的 。 有 这 么 一 句 话 : 如 果 做 某 件 事 有 两 种 或 多 种 
方法 ,其 中 有 一 种 方法 会 导致 一 个 灾难 结局 ,那么 也 会 有 另 一 种 方法 导致 同样 的 结局 。 

测试 的 复杂 性 和 软件 的 复杂 性 是 一 致 的 。 也 就 是 说 由 于 软件 的 复杂 导致 了 测试 的 
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测试 提出 了 基本 的 和 令 人 困惑 的 难题 。 假 使 我 们 在 测试 时 从 来 不 希望 检测 被 测 系统 所 
有 可 能 的 输入 、 路 径 和 状态 ,那么 应 该 选择 什么 ”什么 时 候 应 该 停止 ” 如 果 我 们 必须 依赖 于 
测试 来 防止 某 种 失败 ,那么 我 们 怎么 来 设计 既是 可 测试 的 又 是 有 效 的 系统 呢 ? 我 们 怎样 来 
编写 一 个 测试 包 , 它 可 以 检测 足够 多 的 消息 和 状态 的 组 合 来 说 明 没 有 失败 的 操作 ,但 是 从 实 
用 性 来 说 它 又 足够 的 小 ? 

其 次 对 于 给 定 的 测试 包 , 说 明 被 测 系统 是 符合 规约 所 描述 的 需求 。 

所 以 ,测试 活动 与 软件 过 程 协调 一 致 得 好 与 坏 ,都 对 测试 的 有 效 性 有 很 重要 的 影响 。 

如 果 测 试 的 开发 是 在 一 个 项 目 开 始 时 进行 的 ,那么 测试 将 是 非常 有 效 的 。 及 早 考 虑 可 
测试 性 ,及 早 进行 测试 设计 ,和 尽 可 能 早 地 实现 测试 ,提高 了 有 力 预 防 错误 的 方法 。 这 些 过 
程 迫使 设计 人 员 更 仔细 地 考虑 需求 和 规约 的 实现 ,其 结果 可 能 改进 应 用 设计 。 关 于 体系 结 
Fg ,详细 设计 和 编码 实践 的 及 早 决策 ,都 能 使 测试 变 得 更 容易 更 经 济 。 

软件 质量 是 指 软件 产品 的 特性 可 以 满足 用 户 的 功能 \ 性 能 需求 的 能 力 。 软 件 过 程 是 人 
们 通常 所 说 的 软件 生命 周期 中 的 活动 ,一 般 包 括 软件 需求 分 析 、 软 件 设计 、 软 件 编码 、 软 件 测 
试 、 交 付 、 安 装 和 软件 维护 。 随 着 软件 过 程 的 开始 ,软件 质量 也 逐 减 建立 起 来 。 软 件 过 程 的 
优 劣 决定 了 软件 质量 的 高 低 , 好 的 过 程 是 高 效 高 质量 的 前 提 。 人 员 和 过 程 是 决定 软件 质量 
的 关键 因素 。 高 质量 的 人 员 和 好 的 过 程 应 该 得 到 好 的 产品 。 

软件 系统 的 开发 包括 一 系列 生产 活动 ,其 中 由 人 带 来 的 错误 因素 非常 多 ,错误 可 能 出 现 
在 程序 的 最 初 需求 分 析 阶 段 , 设 计 目 标 可 能 是 错误 的 或 描述 不 完整 ,也 可 能 在 后 期 的 设计 和 
开发 阶段 ,因为 人 员 之 间 的 交流 不 够 ,交流 上 有 误解 或 者 根本 不 进行 交流 ,所 以 尽管 人 们 在 
开发 软件 的 过 程 中 使 用 了 许多 保证 软件 质量 的 方法 和 技术 , 单 开发 出 的 软件 中 还 会 隐藏 许 
多 错误 和 缺陷 。 可 见 , 只 有 通过 严格 的 软件 测试 ,才能 很 好 地 提高 软件 质量 ,而 软件 质量 并 
不 是 依靠 软件 测试 来 保证 的 ,软件 的 质量 要 靠 不 断 地 提高 技术 水 平和 改进 软件 开发 过 程 来 
保证 ,软件 测试 只 是 一 种 有 效 地 提高 软件 质量 的 技术 手段 ,而 不 是 软件 质量 的 安全 网 。 

软件 测试 能 够 找 出 软件 缺陷 ,确保 软件 产品 满足 需求 。 但 是 测试 不 是 质量 保证 ,二 者 并 
不 等 同 。 测 试 可 以 查找 错误 并 进行 修改 ,从 而 提高 软件 产品 的 质量 。 软 件 测试 避免 错误 以 
求 高 质量 ,并 且 还 有 其 他 方面 的 措施 以 保证 质量 问题 ,如 软件 质量 保证 。 
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正规 的 软件 测试 系统 主要 包括 制定 测试 计划 、 测 试 设计 、 实 施 测试 建立 和 更 新 测试 文 
档 。 而 软件 质量 保证 的 工作 主要 为 : 制定 软件 质量 要 求 ,组 织 正式 度量 ,软件 测试 管理 ,对 
软件 的 变更 进行 控制 ,对 软件 质量 进行 度量 ,对 软件 质量 情况 及 时 记录 和 报告 。 软 件 质 量 保 
证 的 职能 是 向 管理 层 提 供 正确 的 可 行 信息 ,从 而 促进 和 辅助 设计 流程 的 改进 。 软 件 质量 保 
证 的 职能 还 包括 监督 测试 流程 ,这 样 测试 工作 就 可 以 被 客观 地 审查 和 评估 ,同时 也 有 助 于 测 
试 流程 的 改进 。 二 者 的 不 同 之 处 在 于 软件 质量 保证 工作 侧重 对 软件 开发 流程 中 的 各 个 过 程 
进行 管理 与 控制 ,杜绝 软件 缺陷 的 产生 。 而 测试 则 是 对 已 产生 的 软件 缺陷 进行 修复 。 

软件 测试 对 软件 质量 的 影响 : 

由 于 人 们 对 于 软件 质量 的 重视 程度 越 来 越 高 ,就 导致 了 软件 测试 在 软件 开发 中 的 地 位 
越 来 越 重 要 。 软 件 测试 是 程序 的 一 种 执行 过 程 ,目的 是 尽 可 能 发 现 并 改正 被 测试 软件 中 的 
错误 ,提高 软件 的 可 靠 性 。 它 是 软件 生命 周期 中 一 项 很 重要 且 非 常 复杂 的 工作 ,对 软件 可 靠 
性 保证 具有 极其 重要 的 意义 。 

在 目前 形式 化 方法 和 程序 正确 性 证 明 技 术 还 无 望 成 为 实用 性 方法 的 情况 下 ,软件 测试 
在 将 来 相当 一 段 时 间 内 仍然 是 软件 可 靠 性 保证 的 有 效 方法 。 软 件 工程 的 总 目标 是 充分 利用 
有 限 的 人 力 和 物力 资源 ,高 效率 、 高 质量 地 完成 软件 开发 项 目 。 不 足 的 测试 势必 使 软件 带 着 
一 些 未 揭露 的 隐藏 错误 投入 运行 ,这 将 意味 着 更 大 的 危险 让 用 户 承担 ,过 度 测试 则 会 浪费 许 
多 宝贵 的 资源 。 到 测试 后 期 ,即使 找到 了 错误 ,然而 付出 了 过 高 的 代价 。E. W. Dijkstra 的 
一 名 名 言说 明了 这 一 道理 :“ 程 序 测试 只 能 表明 错误 的 存在 ,而 不 能 表明 错误 不 存在 .可 
见 ,测试 是 为 了 使 软件 中 蕴涵 的 缺陷 低 于 某 一 特定 值 ,使 产 出 、 投 入 比 达到 最 大 。 

软件 测试 和 软件 质量 是 分 不 开 的 。 测 试 是 手段 ,质量 是 目的 。 对 比 国外 可 以 看 到 ,国外 
软件 开发 机 构 会 把 40% 的 工作 花 在 测试 上 ,测试 费用 则 会 占 到 软件 开发 总 费用 的 30% 到 
50% ,对 于 一 些 要 求 高 可 靠 性 、 高 安全 性 的 软件 ,测试 费用 则 相当 于 整个 软件 项 目 开 发 费用 
的 3 至 5 倍 。 因 此 ,软件 测试 在 软件 生存 期 中 占有 非常 突出 的 位 置 ,是 保证 软件 质量 的 重要 
手段 。 

软件 项 目的 实践 一 再 说 明 ,为 了 确保 软件 产品 能 够 符合 用 户 的 需要 ,必须 着 眼 于 整个 软 
件 生存 周期 ,在 各 个 阶段 进行 验证 、 确 认 和 测试 活动 ,使 软件 不 致 在 开发 完成 后 , 才 发 现 和 用 
户 的 需求 有 较 大 的 差距 。 


2.6 软件 质量 保证 与 软件 测试 


软件 质量 保证 (Software Quality Assurance,SQA) 是 建立 一 套 有 计划 、 有 系统 的 方法 ， 
来 向 管理 层 保 证 拟定 出 的 标准 \ 步 又、 实践 和 方法 能 够 正确 地 被 所 有 项 目 所 采用 。 软 件 质 量 
保证 的 目的 是 使 软件 过 程 对 于 管理 人 员 来 说 是 可 见 的 。 它 通过 对 软件 产品 和 活动 进行 评审 
和 审计 来 验证 软件 是 合乎 标准 的 。 软 件 质量 保证 所 要 实现 的 主要 目标 包括 : 软件 质量 保证 
工作 是 有 计划 进行 的 ; 客观 地 验证 软件 项 目 产品 和 工作 是 否 遵 循 恰当 的 标准 、 步 又 和 需求 ; 
将 软件 质量 保证 工作 及 结果 通知 给 相关 组 别 和 个 人 ; 高 级 管理 层 接触 到 在 项 目 内 部 不 能 解 
决 的 不 符合 类 问题 ; 软件 质量 需要 全 面 的 测试 工作 来 保证 。 

软件 质量 保证 的 目的 不 是 为 了 保证 产品 质量 ,保证 产品 质量 是 软件 测试 的 任务 。 软 件 
质量 保证 主要 是 提供 确信 。 因 此 要 对 了 解 客户 要 求 开始 至 售后 服务 的 全 过 程 进行 管理 。 这 
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就 要 求 企业 建立 品 管 体系 ,制定 相应 的 文件 规范 各 过 程 的 活动 并 留 下 活动 实施 的 证 据 , 以 使 
提供 信任 。 

软件 测试 和 软件 质量 保证 的 主要 区 别 是 前 者 是 保证 产品 质量 符合 规定 ,后 者 是 建立 体 
系 并 确保 体系 按 要 求 运作 ,以 提供 内 外 部 的 信任 。 同 时 软件 测试 和 软件 质量 保证 又 有 相同 
点 : 即 软件 测试 和 软件 质量 保证 都 要 进行 验证 ,如 软件 测试 按 标准 检测 产品 ,就 是 验证 产品 
是 否 符合 规定 要 求 ,软件 质量 保证 进行 内 审 就 是 验证 体系 运作 是 否 符合 标准 要 求 。 

软件 测试 人 员 的 职责 是 尽 可 能 早 地 发 现 缺陷 ,并 确保 缺陷 得 以 修复 。 软 件 质量 保证 人 
员 的 职责 是 创建 和 执行 改进 软件 开发 过 程 ,并 防止 软件 缺陷 发 生 的 标准 和 方法 。 一 个 关注 
如 何 避 免 产 生 缺 陷 ,侧重 点 是 控制 产品 产生 的 过 程 ; 一 个 关注 如 何 尽快 发 现 缺 陷 , 重 点 是 产 
品 本 身 。 

软件 质量 保证 活动 与 测试 的 关系 如 图 2-18 所 示 。 
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图 2-18 软件 质量 保证 活动 与 测试 的 关系 


质量 保证 的 主要 工作 范围 如 下 。 

(1) 指导 并 监督 项 目 按照 过 程 实施 。 

(2) 对 项 目 进行 度量 、 分 析 , 增 加 项 目的 可 视 性 。 

(3) 审核 工作 产品 ,评价 工作 产品 和 过 程 质量 目标 的 符合 度 。 

CD 进行 缺陷 分 析 , 缺 陷 预防 活动 ,发现 过 程 的 缺陷 ,提供 决策 参考 ,促进 过 程 改进 。 

质量 保证 和 测试 的 关系 如 下 。 

(1) SQA 从 流程 方面 保证 软件 的 质量 。 

(2) 测试 从 技术 方面 保证 软件 的 质量 。 

软件 测试 和 软件 质量 保证 是 软件 质量 工程 的 两 个 不 同 层面 的 工作 。 软 件 测试 只 是 软件 
质量 保证 工作 的 一 个 重要 环节 。 

质量 保证 的 工作 是 通过 预防 、 检 查 和 改进 来 保证 软件 质量 。QA 采取 的 方法 主要 是 按 
照 * 全 面 质量 管理 ”和 “过 程 管理 并 改进 ”的 原则 来 展开 工作 。 在 质量 保证 的 工作 中 会 挫 入 一 
些 测试 活动 ,但 它 所 关注 的 是 软件 质量 的 检查 和 测量 。 因 此 ,其 主要 工作 是 着 眼 于 软件 开发 
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活动 中 的 过 程 步骤 和 产物 ,并 不 是 对 软件 进行 剖析 , 找 出 问题 和 评估 。 

测试 虽然 也 与 开发 过 程 紧密 相关 ,但 它 所 关心 的 不 是 过 程 的 活动 ,相对 的 是 关心 结果 。 
测试 人 员 要 对 过 程 中 的 产物 (开发 文档 和 源 代码 ) 进 行 静态 审核 ,运行 软件 , 找 出 问题 ,报告 
质量 甚至 评估 ,而 不 是 为 了 验证 软件 的 正确 性 。 当 然 ,测试 的 目的 是 为 了 去 证 明 软件 有 错 ， 
否则 就 违背 了 测试 人 员 的 本 职 。 因 此 ,测试 虽然 对 提高 软件 质量 起 了 关键 的 作用 ,但 它 只 是 
软件 质量 保证 中 的 一 个 重要 环节 。 

很 少 有 人 从 非 技术 角度 去 分 析 这 两 者 的 区 别 ,但 本 书 作 者 认为 ,从 公司 业务 出 发 ,QA 
的 工作 是 相对 前 置 的 ,并 可 能 含有 某 种 公关 性 质 ; 而 软件 测试 相对 后 置 ,是 内 部 层面 的 工 
作 。 这 也 同样 验证 了 两 者 的 本 质 区 别 , 即 “软件 测试 和 软件 质量 保证 是 软件 质量 工程 的 两 个 
不 同 层面 的 工作 。 软 件 测试 只 是 软件 质量 保证 工作 的 一 个 重要 环节 。” 

软件 质量 保证 : SQA 介入 于 整个 软件 开发 过 程 -监督 和 改进 过 程 ,确认 达成 的 标准 和 过 
程 被 正确 地 遵循 ,保证 问题 被 发 现 和 解决 。 它 以 预防 为 主 。 

软件 测试 : 软件 测试 是 在 一 定 控制 的 条 件 下 ,围绕 一 个 系统 或 应 用 的 操作 并 且 评价 其 
结果 (一 个 简单 的 例子 : 如 果 用 户 使 用 硬件 A, 在 一 个 应 用 接口 B 上 做 了 操作 C ,那么 结果 
D 应 当 出 现 ) ,控制 的 条 件 应 当 包 括 正常 和 异常 的 条 件 。 测 试 企图 使 事情 变 得 很 糟 ,从 而 来 
检测 出 一 些 应 当 发 生 而 没 发 生 , 或 者 不 应 该 发 生 而 发 生 的 事情 。 测 试 以 检测 为 主 。 

软件 测试 人 员 的 一 项 重要 任务 是 提高 软件 质量 ,但 不 等 于 说 软件 测试 人 员 就 是 软件 质 
量 保证 人 员 ,因为 测试 只 是 质量 保证 工作 中 的 一 个 环节 。 软 件 质 量 保证 和 软件 测试 是 软件 
质量 工程 的 两 个 不 同 层 面 的 工作 。 


(gsm 


. 质量 的 定义 是 什么 ? 

. 软件 质量 的 定义 是 什么 ? 

.影响 软件 质量 的 主要 因素 有 了 哪些? 

. 常见 的 软件 质量 模型 有 哪 几 种 ? 它们 各 有 什么 特点 ? 

. 质量 标准 的 发 展 情况 是 怎样 的 ? 

. 软件 质量 与 软件 测试 ,软件 质量 保证 与 软件 测试 之 间 有 什么 联系 ? 


@ m ot = 


° 面向 传统 开发 过 程 的 软件 测试 
+ 面向 软件 工程 层面 的 软件 测试 
自动 化 测试 

` 敏捷 测试 


面向 传统 开发 过 十 程 的 软件 测试 | 


本 章 学 习 重 点 


* 熟悉 常见 的 软件 测试 模型 以 及 它们 之 间 的 区 别 。 

。 人 掌握 软件 生命 周期 的 几 个 阶段 。 

° 了解 常见 的 软件 开发 模型 。 

° 了 解 什么 是 单元 测试 .集成 测试 和 系统 测试 。 

* 部 悉 单元 测试 .集成 测试 和 系统 测试 的 主要 工作 内 容 。 
。 掌握 编写 测试 用 例 的 方法 。 


本 章 学 习 难 点 


悉 常 见 软件 测试 模型 之 间 的 区 别 。 
G.A 软件 测试 模型 


目前 常见 的 主流 软件 生命 周期 模型 或 软件 开发 过 程 模型 有 瀑布 模型 .原型 模型 .螺旋 模 
型 增 量 模型 渐进 模型 .快速 软件 开发 (RAD) 以 及 Rational 统一 过 程 (RUP) 等 ,这 些 模型 对 
于 软件 开发 过 程 具有 很 好 的 指导 作用 。 但 在 这 些 过 程 方法 中 ,软件 测试 的 地 位 和 价值 并 没有 
体现 出 来 ,也 没有 给 软件 测试 以 足够 的 重视 ,利用 这 些 模 型 显然 无 法 更 好 地 指导 测试 实践 。 软 
件 测试 是 与 软件 开发 紧密 相关 的 一 系列 有 计划 、 系 统 性 的 活动 ,软件 测试 也 需要 测试 模型 去 指 
导 实 践 。 下 面 先 对 主要 的 软件 测试 模型 做 一 些 简 单 的 介绍 ,再 补充 软件 生命 周期 做 介绍 。 


1. V 模型 


V 模型 是 最 具有 代表 性 的 测试 模型 。V 模型 最 早 是 由 Paul Rook 在 20 世纪 80 年 代 后 
期 提出 的 ,V 模型 在 英国 国家 计算 中 心 文献 中 发 布 , 旨 在 改进 软件 开发 的 效率 和 效果 。 

在 传统 的 开发 模型 中 ,例如 瀑布 模型 ,通常 把 测试 过 程 作为 在 需求 分 析 、 概 要 设计 、 详 细 
设计 和 编码 全 部 完成 之 后 的 一 个 阶段 ,尽管 有 时 测试 工作 会 占用 整个 项 目 周 期 一 半 的 时 间 ， 
但 是 有 人 仍 认 为 测试 只 是 一 个 收尾 工作 ,而 不 是 主要 的 工程 。V 模型 的 推出 就 是 对 此 种 认 
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识 的 改进 。V 模型 是 软件 开发 瀑布 模型 的 变种 , 它 反映 了 测试 活动 与 分 析 和 设计 的 关系 ， 
从 左 到 右 ,描述 了 基本 的 开发 过 程 和 测试 行为 ,明确 地 标明 了 测试 工程 中 存在 的 不 同 级 别 ， 
清楚 地 描述 了 这 些 测试 阶段 和 开发 过 程 期 间 各 阶段 的 对 应 关系 ,如 图 3-1 所 示 。 

验证 与 确认 


需求 验收 测试 
EY "— 
规格 说 明 下 与 确认 系统 测试 


x ERES 

概要 设计 ES Dae 
x - š 

详细 设计 BES 单元 测试 


图 3-1 V 模 型 


图 3-1 中 ,V 模型 图 中 箭头 代表 了 时 间 方 向 ,左边 下 降 的 是 开发 过 程 各 阶段 ,与 此 相对 
应 的 是 右边 上 升 的 部 分 , 即 测试 过 程 的 各 个 阶段 。 

V 模型 的 软件 测试 策略 既 包 括 底层 测试 又 包括 上 层 测 试 ,底层 测试 是 为 了 确保 源 代 码 
的 正确 性 ,上 层 测试 是 为 了 使 整个 系统 满足 用 户 的 需求 。 

V 模型 指出 ,单元 和 集成 测试 是 验证 程序 设计 ,开发 人 员 和 测试 组 应 检测 程序 的 执行 
是 否 满足 软件 设计 的 要 求 ; 系统 测试 应 当 验 证 系统 设计 ,检测 系统 功能 ,性 能 的 质量 特性 是 
否 达 到 系统 设计 的 指标 ; 由 测试 人 员 和 用 户 进 行 软件 的 确认 测试 和 验收 测试 ,追溯 软件 需 
求 说 明 书 进行 测试 ,以 确定 软件 的 实现 是 否 满足 用 户 需求 或 合同 的 要 求 。 

V 模型 存在 一 定 的 局 限 性 , 它 仅 把 测试 过 程 作为 在 需求 分 析 、 概 要 设计 、 详 细 设计 及 编 
码 之 后 的 一 个 阶段 。 容 易 使 人 理解 为 测试 是 软件 开发 的 最 后 一 个 阶段 ,主要 是 针对 程序 进 
行 测试 寻找 错误 ,而 需求 分 析 阶 段 隐藏 的 问题 一 直到 后 期 的 验收 测试 才 被 发 现 。 

类 比 记忆 : 此 模型 与 软件 开发 模式 中 的 线性 模型 (典型 的 瀑布 模型 ) 有 相似 的 不 足 ,在 
瀑布 模型 中 ,测试 阶段 处 于 软件 实现 后 ,这 意味 着 必须 在 代码 完成 后 有 足够 的 时 间 预 留 给 测 
试 活动 ,否则 将 导致 测试 不 充分 ,开发 前 期 未 发 现 的 错误 会 传递 并 扩散 到 后 面 的 阶段 ,而 在 
后 面 发 现 这 些 错误 时 ,可 能 已 经 很 难 回头 再 修正 ,从 而 导致 项 目的 失败 。 


2. W 模型 


V 模型 的 局 限 性 在 于 没有 明确 地 说 明 早期 的 测试 ,不 能 体现 “尽早 地 和 不 断 地 进行 软 
件 测试 ”的 原则 。 在 V 模型 中 增加 软件 各 开发 阶段 应 同步 进行 的 测试 ,被 演化 为 一 种 W 模 
型 ,因为 实际 上 开发 是 “V”, 测 试 也 是 与 此 相 并 行 的 “V”。 只 不 过 把 这 二 者 结合 起 来 进行 
“并 行 工程 ”而 已 ,基于 “尽早 地 和 不 断 地 进行 软件 测试 "的 原则 ,在 软件 的 需求 和 设计 阶段 的 
测试 活动 应 遵循 IEEE STD 1012 一 1998《 软 件 验 证 和 确认 (V&V)) 的 原则 。 

一 个 基于 V&V 原理 的 W 模型 示意 图 如 图 3-2 所 示 。 

相对 于 V 模型 ,W 模型 更 科学 。W 模型 可 以 说 是 V 模型 自然 而 然 的 发 展 。W 模型 强 
调 测试 伴随 着 整个 软件 开发 周期 ,而且 测 试 的 对 象 不 仅 是 程序 ,需求 功能 和 设计 同样 要 测 
试 。 这 样 ,只 要 相应 地 开发 活动 完成 ,就 可 以 开始 执行 测试 ,可 以 说 ,测试 与 开发 是 同步 进行 
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Sp | 《需求 测试 》 系统 安装 | 《验收 测试 》 


概要 设计 


详细 设计 (E 模块 集成 | 《集成 测试 》 
| 、_ 测 斌 人 ea 
i 
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图 3-2 W 模型 


的 ,从 而 有 利于 尽早 地 发 现 问题 。 以 需求 为 例 ,需求 分 析 一 完成 ,就 可 以 对 需求 进行 测试 ,而 
不 是 等 到 最 后 才 进 行 针 对 需求 的 验收 测试 。 

如 果 测 试 文档 能 尽早 提交 ,那么 就 有 了 更 多 的 检查 和 检阅 的 时 间 ,这些 文 档 还 可 用 于 评 
估 开 发 文档 。 另 外 还 有 一 个 很 大 的 益处 是 ,测试 者 可 以 在 项 目 中 尽 可 能 早 地 面 对 规格 说 明 
书 中 的 挑战 。 这 意味 着 测试 不 仅 是 评定 软件 的 质量 ,还 可 以 尽 可 能 早 地 找 出 缺陷 所 在 ,从 而 
帮助 改进 项 目 内 部 的 质量 。 参 与 前 期 工作 的 测试 者 可 以 预先 估计 间 题 和 难度 ,这 将 可 以 显 
著 地 减少 总 体 测 试 时 间 , 加 快 项 目 进度 。 

根据 W 模型 的 要 求 , 一 旦 有 文档 提供 ,就 要 及 时 确定 测试 条 件 ,以 及 编写 测试 用 例 , 这 
些 工作 对 测试 的 各 级 别 都 有 意义 。 当 需求 被 提交 后 ,就 需要 确定 高 级 别 的 测试 用 例 来 测试 
这 些 需 求 。 当 概要 设计 编写 完成 后 ,就 需要 确定 测试 条 件 来 查找 该 阶段 的 设计 缺陷 。 

W 模型 也 是 有 局 限 性 的 。 这 一 点 实际 上 源 于 V 模型 的 缺陷 , W 模型 和 V 模型 都 把 软 
件 的 开发 视 为 需求 .设计 、 编 码 等 一 系列 串 行 的 活动 。 同 样 ,软件 开发 和 测试 保持 一 种 线性 
的 前 后 关系 ,需要 有 严格 的 指令 表示 上 一 阶段 完全 结束 , 才 可 以 正式 开始 下 一 个 阶段 。 这 样 
就 无 法 支持 迭代 、 自 发 性 以 及 变更 调整 。 对 于 当前 很 多 文档 需要 事后 补充 ,或 者 根本 没有 文 
档 的 做 法 (这 已 成 为 一 种 开发 的 文化 ) ,开发 人 员 和 测试 人 员 都 面临 同样 的 困惑 。 

类 比 记忆 : W 模型 相当 于 两 个 V 模型 的 琶 加 ,一 个 是 开发 的 V, 一 个 是 测试 的 V, 由 于 
在 项 目 中 开发 和 测试 是 同步 进行 的 ,相当 于 两 个 V 是 并 列 同步 进行 的 ,测试 在 一 定 程度 是 
随 着 开发 的 进展 而 不 断 向 前 进行 的 。 
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3. H 模型 


V 模型 和 W 模型 均 存在 一 些 不 妥 之 处 。 首 先 ,如 前 所 述 , 它 们 都 把 软件 的 开发 视 为 需 
求 .设计 、 编 码 等 一 系列 串 行 的 活动 ,而 事实 上 ,虽然 这 些 活 动 之 间 存 在 相互 牵制 的 关系 ,但 
在 大 部 分 时 间 内 ,它们 是 可 以 交叉 进行 的 。 虽 然 软件 开发 期 望 有 清晰 的 需求 .设计 和 编码 阶 
段 , 但 实践 告诉 我 们 ,严格 的 阶段 划分 只 是 一 种 理想 状况 。 试 问 , 有 几 个 软件 项 目 是 在 有 了 
明确 的 需求 之 后 才 开始 设计 的 呢 ? 所 以 ,相应 的 测试 之 间 也 不 存在 严格 的 次 序 关 系 。 同 时 ， 
各 层次 之 间 的 测试 也 存在 反复 触发 .和 迭代 和 增 量 关系 。 其 次 ,V 模型 和 W 模型 都 没有 很 好 
地 体现 测试 流程 的 完整 性 。 

为 了 解决 以 上 问题 ,提出 了 H 模型 。 它 将 测试 活动 完全 独立 出 来 ,形成 一 个 完全 独立 的 
流程 ,将 测试 准备 活动 和 测试 执行 活动 清晰 地 体现 出 来 。H 模型 的 简单 示意 图 如 图 3-3 所 示 。 
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测试 就 绪 点 
测试 准备 测试 执行 
= 测试 流程 


业 其 他 流程 (如 设计 流程 ) 


图 3-3 HËM 


互 模 型 图 仅 演示 了 在 整个 生存 周期 中 某 个 层次 上 的 一 次 测试 “ 微 循环 ”。 图 中 的 其 他 
流程 可 以 是 任意 开发 流程 。 例 如 ,设计 流程 和 编码 流程 。 也 可 以 是 其 他 非 开 发 性 流程 ,例如 
SQA 流程 ,甚至 是 测试 流程 自身 。 也 就 是 说 ,只 要 测试 条 件 成 熟 ,测试 准备 活动 完成 了 , 测 


试 执 行 活动 就 可 以 (或 者 说 需要 ) 进 行 了 。 
概括 地 说 , H 模型 揭示 了 : 
CD 软件 测试 不 仅 指 测试 的 执行 ,还 包括 很 多 其 他 的 活动 。 


(2) 软件 测试 是 一 个 独立 的 流程 ,贯穿 产品 整个 生命 周期 ,与 其 他 流程 并 发 地 进行 。 


(3) 软件 测试 要 尽早 准备 ,尽早 执行 。 


(4) 软件 测试 是 根据 被 测 物 的 不 同 而 分 层次 进行 的 。 不 同 层次 的 测试 活动 可 以 是 按照 


某 个 次 序 先后 进行 的 ,但 也 可 能 是 反复 的 。 


在 H 模型 中 ,软件 测试 模型 是 一 个 独立 的 流程 ,贯穿 于 整个 产品 周期 ,与 其 他 流程 并 发 
地 进行 。 当 某 个 测试 时 间 点 就 绪 时 ,软件 测试 即 从 测试 准备 阶段 进入 测试 执行 阶段 。 


4. X 模型 


下 面 介绍 另外 一 种 测试 模型 , 即 X 模 型 ,其 目标 是 弥补 V 模型 的 一 些 缺陷 。 该 模型 也 
是 对 V 模型 的 改进 ,X 模型 提出 针对 单独 的 程序 片段 进行 相互 分 离 的 编码 和 测试 ,此 后 通 
过 频繁 的 交接 ,通过 集成 最 终 合 成 为 可 执行 的 程序 。 软 件 测试 X 模型 如 图 3-4 所 示 。 


程序 片段 1 封 版 
— 执行 测试 
— 测试 设计 
执行 测试 TANE 
编码 完成 Y | aion 
执行 测试 ` 
工具 配置 A 探索 性 测试 
测试 设计 e. 
tet pe 执行 测试 
FEE H Bin wr as 
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X 模 型 的 基本 思想 是 由 Marick 提出 的 ,Marick 对 V 模型 最 主要 的 批评 是 V 模型 无 法 
引导 项 目的 全 部 过 程 。 他 认为 一 个 模型 必须 能 处 理 开发 的 所 有 方面 ,包括 交接 、 频 繁重 复 的 
集成 以 及 需求 文档 的 缺乏 等 。Marick 认为 一 个 模型 不 应 该 规定 那些 和 当前 所 公认 的 实践 
不 一 致 的 行为 。 

X 模型 的 左边 描述 的 是 针对 单独 程序 片段 所 进行 的 相互 分 离 的 编码 和 测试 ,此 后 将 进 
行 频繁 的 交接 ,通过 集成 最 终 成 为 可 执行 的 程序 ,然后 再 对 这 些 可 执行 程序 进行 测试 。 已 通 
过 集成 测试 的 成 品 可 以 进行 封装 并 提交 给 用 户 , 也 可 以 作为 更 大 规模 和 范围 内 集成 的 一 部 
分 。 多 根 并 行 的 曲线 表示 变更 可 以 在 各 个 部 分 发 生 。 从 图 3-4 中 可 见 ,X 模型 还 定位 了 探 
索性 测试 ,这 是 不 进行 事先 计划 的 特殊 类 型 的 测试 ,这 一 方式 往往 能 帮助 有 经 验 的 测试 人 员 
在 测试 计划 之 外 发 现 更 多 的 软件 错误 。 但 这 样 可 能 对 测试 造成 人 力 、 物 力 和 财力 的 浪费 ,对 
测试 员 的 熟练 程度 要 求 比较 高 。 

Marick 对 V 模型 提出 质疑 ,也 是 因为 V 模型 是 基于 一 套 必须 按照 一 定 顺序 严格 排列 
的 开发 步骤 ,而 这 很 可 能 并 没有 反映 实际 的 实践 过 程 。 因 为 在 实践 过 程 中 ,很 多 项 目 是 缺乏 
足够 的 需求 的 ,而 V 模型 还 是 从 需求 处 理 开 始 。 

Marick 也 质疑 了 单元 测试 和 集成 测试 的 区 别 ,因为 在 某 些 场合 人 们 可 能 会 跳 过 单元 测 
试 而 热衷 于 直接 进行 集成 测试 。Marick 担心 人 们 盲目 地 跟随 “学 院 派 的 V 模型 ,按照 模型 
所 指导 的 步骤 进行 工作 ,而 实际 上 某 些 做 法 并 不 切合 实际 。 


5. 前 置 测试 模型 
前 置 测试 模型 是 将 测试 和 开发 紧密 结合 的 模型 ,该 模型 提供 了 轻松 的 方式 ,可 以 使 项 目 
加 快速 度 。 
前 置 测试 模型 如 图 3-5 所 示 。 
e C hH 系统 分 析 E 
rF m 
说 明 
设计 文档 
基于 测试 的 
TE TEM 
计划 
— 正式 走 查 
验收 测试 WARY 开发 
计划 元 测试 
i [集成 测试 
执行 系统 测试 
i 专项 测试 
运行 与 维护 | [a 1 
(生命 周期 ) | | 验收 测试 独立 (QA) 测 斌 


图 3-5 前 置 测试 模型 
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前 置 测试 模型 体现 了 以 下 要 点 。 

CD 开发 和 测试 相 结 合 。 前 置 测试 模型 将 开发 和 测试 生命 周期 整合 在 一 起 ,标识 了 项 
目 生命 周期 从 开始 到 结束 之 间 的 关键 行为 ,并 且 标 识 了 这 些 行为 在 项 目 周 期 中 的 价值 所 在 。 
如 果 其 中 有 些 行为 没有 得 到 很 好 的 执行 ,那么 项 目 成 功 的 可 能 性 就 会 因此 而 有 所 降低 。 如 
果 有 业务 需求 , 则 系统 开发 过 程 将 更 有 效率 。 我 们 认为 在 没有 业务 需求 的 情况 下 进行 开发 
和 测试 是 不 可 能 的 。 而 且 , 业 务 需求 最 好 在 设计 和 开发 之 前 就 被 正确 定义 。 

(2) 对 每 一 个 交付 内 容 进行 测试 。 每 一 个 交付 的 开发 结果 都 必须 通过 一 定 的 方式 进行 
测试 。 源 程序 代码 并 不 是 唯一 需要 测试 的 内 容 。 图 中 的 椭圆 框 表 示 了 其 他 一 些 要 测试 的 对 
象 ,包括 可 行 性 报告 .业务 需求 说 明 , 以 及 系统 设计 文档 等 。 这 同 V 模型 中 开发 和 测试 的 对 
应 关系 是 一 致 的 ,并 且 在 其 基础 上 有 所 扩展 , 变 得 更 为 明确 。 

CD 在 设计 阶段 进行 测试 计划 和 测试 设计 。 设 计 阶 段 是 做 测试 计划 和 测试 设计 的 最 好 
时 机 。 很 多 组 织 要 么 根本 不 做 测试 计划 和 测试 设计 ,要 么 在 即将 开始 执行 测试 之 前 才 飞 快 
地 完成 测试 计划 和 测试 设计 。 在 这 种 情况 下 ,测试 只 是 验证 了 程序 的 正确 性 ,而 不 是 验证 整 
个 系统 本 该 实现 的 东西 。 

(4) 测试 和 开发 结合 在 一 起 。 前 置 测试 将 测试 执行 和 开发 结合 在 一 起 ,并 在 开发 阶段 
以 编码 一 测试 一 编码 一 测试 的 方式 来 体现 。 也 就 是 说 ,程序 片段 一 旦 编写 完成 ,就 会 立即 进 
行 测试 。 一 般 情 况 下 ,先进 性 的 测试 是 单元 测试 ,因为 开发 人 员 认为 通过 测试 来 发 现 错误 是 
最 经 济 的 方式 。 但 也 可 参考 X 模型 , 即 一 个 程序 片段 也 需要 相关 的 集成 测试 ,甚至 有 时 还 
需要 一 些 特殊 测试 。 对 于 一 个 特定 的 程序 片段 ,其 测试 的 顺序 可 以 按照 V 模型 的 规定 ,但 
其 中 还 会 交织 一 些 程序 片段 的 开发 ,而 不 是 按 阶段 完全 地 隔离 。 

(5) 让 验收 测试 和 技术 测试 保持 相对 独立 。 验 收 测试 应 该 独立 于 技术 测试 ,这 样 可 以 
提供 双重 的 保险 ,以 保证 设计 及 程序 编码 能 够 符合 最 终 用 户 的 要 求 。 验 收 测试 既 可 以 在 实 
施 的 第 一 步 来 执行 ,也 可 以 在 开发 阶段 的 最 后 一 步 执行 。 前 置 测试 模型 提倡 验收 测试 和 技 
术 测试 沿 循 两 条 不 同 的 路 线 来 进行 ,每 条 路 线 分 别 验证 系统 是 否 能 够 如 预期 设想 的 那样 进 
行 正常 工作 。 这 样 , 当 单独 设计 好 的 验收 测试 完成 了 系统 的 验证 时 , 即 可 确信 这 是 一 个 正确 
的 系统 。 

前 置 测试 模型 包括 两 项 测试 计划 技术 ,这 也 是 需求 测试 技术 中 的 一 部 分 。 其 中 的 第 一 
项 技术 是 开发 基于 需求 的 测试 用 例 。 这 并 不 仅仅 是 为 以 后 提交 上 来 的 程序 的 测试 做 好 初始 
化 准备 ,也 是 为 了 验证 需求 是 否 是 可 测试 的 。 这 些 测试 可 以 交 由 用 户 来 进行 验收 测试 ,或 者 
由 开发 部 门 做 某 些 技术 测 试 。 很 多 测试 团体 都 认为 ,需求 的 可 测试 性 即使 不 是 需求 首要 的 
属性 ,也 应 是 其 最 基本 的 属性 之 一 。 因 此 ,在 必要 的 时 候 可 以 为 每 一 个 需求 编写 测试 用 例 。 
不 过 ,基于 需求 的 测试 最 多 也 只 是 和 需求 本 身 一 样 重要 。 一 项 需求 可 能 本 身 是 错误 的 ,但 它 
仍 是 可 测试 的 。 而 且 , 无 法 为 一 些 被 忽略 的 需求 来 编写 测试 用 例 。 

第 二 项 技术 是 定义 验收 标准 。 在 接受 交付 的 系统 之 前 ,用 户 需要 用 验收 标准 来 进行 验 
证 。 验 收 标准 并 不 仅仅 是 定义 需求 ,还 应 在 前 置 测试 之 前 进行 定义 ,这 将 帮助 揭示 某 些 需 求 
是 否 正确 ,以 及 某 些 需 求 是 否 被 忽略 了 。 

在 V 模型 中 ,验收 测试 最 早 被 定义 好 ,并 在 最 后 执行 ,以 验证 所 交付 的 系统 是 否 真正 符 
合用 户 业 务 的 需求 。 

与 V 模型 不 同 的 是 ,前 置 测 试 模 型 认识 到 验收 测试 中 所 包含 的 三 种 成 分 ,其 中 的 两 种 
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都 与 业务 需求 定义 相 联系 : 即 定义 基于 需求 的 测试 ,以 及 定义 验收 标准 。 但 是 ,第 三 种 则 需 
要 等 到 系统 设计 完成 ,因为 验收 测试 计划 是 由 针对 按 设 计 实 现 的 系统 来 进行 的 一 些 明 确 操 
作 定 义 所 组 成 ,这 些 定义 包括 : 如 何 判断 验收 标准 已 经 达到 ,以 及 基于 需求 的 测试 已 算 成 功 
完成 。 

技术 测试 主要 是 针对 开发 代码 的 测试 ,例如 ,V 模型 中 所 定义 的 动态 的 单元 测试 ,集成 
测试 和 系统 测试 。 另 外 ,前 置 测试 还 提示 我 们 应 增加 静态 审查 ,以 及 独立 的 QA 测试 。 

QA 测试 通常 跟随 在 系统 测试 之 后 ,从 技术 部 门 的 意见 和 用 户 的 预期 方面 出 发 ,进行 最 后 
的 检查 。 同 样 的 还 有 特别 测试 。 将 其 取 名 为 特别 测试 ,并 把 该 名 称 作为 很 多 测试 的 一 个 统称 ， 
这 些 测试 包括 负载 测试 .安全 性 测试 .可 用 性 测试 等 ,它们 不 是 由 业务 逻辑 和 应 用 来 驱动 的 。 

对 技术 测试 最 基本 的 要 求 是 验证 代码 的 编写 和 设计 的 要 求 是 否 相 一 致 。 一 致 的 意思 是 
系统 确实 提供 了 要 求 提供 的 ,并 且 系 统 并 没有 提供 不 要 求 提供 的 。 技 术 测试 在 设计 阶段 进 
行 计 划 和 设计 ,并 在 开发 阶段 由 技术 部 门 来 执行 。 


6. 测试 模型 的 使 用 


前 面 介 绍 了 几 种 典型 的 测试 模型 ,应 该 说 这 些 模型 对 指导 测试 工作 的 进行 具有 重要 的 
意义 ,但 任何 模型 都 不 是 完美 的 。 应 该 尽 可 能 地 去 应 用 模型 中 对 项 目 有 实用 价值 的 方面 ,但 
不 强行 地 为 使 用 模型 而 使 用 模型 ,否则 也 没有 实际 意义 。 

在 这 些 模 型 中 ,V 模型 强调 了 在 整个 软件 项 目 开 发 中 需要 经 历 的 若干 个 测试 级 别 , 而 
且 每 一 个 级 别 都 与 一 个 开发 级 别 相对 应 ,但 它 忽略 了 测试 的 对 象 不 应 该 仅 包括 程序 ,或 者 说 
它 没有 明确 地 指出 应 该 对 软件 的 需求 .设计 进行 测试 ,而 这 一 点 在 W 模型 中 得 到 了 补充 。 
W 模型 强调 了 测试 计划 等 工作 的 先行 和 对 系统 需求 和 系统 设计 的 测试 ,但 W 模型 和 V Bi 
型 一 样 也 没有 专门 对 软件 测试 流程 予以 说 明 ,因为 事实 上 , 随 着 软件 质量 要 求 越 来 越 为 大 家 
所 重视 ,软件 测试 也 逐步 发 展 成 为 一 个 独立 于 软件 开发 的 一 系列 活动 ,就 每 一 个 软件 测试 的 
细节 而 言 , 它 都 有 一 个 独立 的 操作 流程 。 例 如 ,现在 的 第 三 方 测试 ,就 包含 从 测试 计划 和 测 
试用 例 编写 ,到 测试 实施 以 及 测试 报告 编写 的 全 过 程 ,这 个 过 程 在 H 模型 中 得 到 了 相应 的 
体现 ,表现 为 测试 是 独立 的 。 也 就 是 说 ,只 要 测试 前 提 具 备 了 ,就 可 以 开始 进行 测试 。 当 然 ， 
和 模型 和 前 置 测 试 模型 又 在 此 基础 上 增加 了 许多 不 确定 因素 的 处 理 情况 ,因为 在 真实 项 目 
中 ,经 常会 有 变更 的 发 生 , 例 如 ,需要 重新 访问 前 一 阶段 的 内 容 , 或 者 跟踪 并 纠正 以 前 提交 的 
内 容 , 修 复 错误 ,排除 多 余 的 成 分 ,以 及 增加 新 发 现 的 功能 等 。 

因此 ,在 实际 的 工作 中 ,要 灵活 地 运用 各 种 模型 的 优点 ,在 W 模型 的 框架 下 ,运用 H Bi 
型 的 思想 进行 独立 的 测试 ,并 同时 将 测试 与 开发 紧密 结合 ,寻找 恰当 的 就 绪 点 开始 测试 并 反 
复 迭 代 测 试 ,最 终 保证 按期 完成 预定 目标 。 


8.2 软件 生命 周期 


和 任何 事物 一 样 ,软件 也 有 其 孕育 、 诞 生成 长 ,成熟 和 衰亡 的 生存 过 程 ,一 般 称 其 为 “ 软 
件 生 命 周 期 *。 软 件 生命 周期 一 般 分 为 6 个 阶段 , 即 制定 计划 、 需 求 分 析 、 设 计 、 编 码 、 测 试 、 
运行 和 维护 。 现 实 的 软件 开发 的 各 个 阶段 之 间 的 关系 不 可 能 是 顺序 且 线性 的 ,而 应 该 是 带 
有 反馈 的 迭代 过 程 。 在 软件 工程 中 ,这 个 复杂 的 过 程 用 软件 开发 模型 来 描述 和 表示 。 


69 


Ë` 


70 


N 


实用 软件 测试 


软件 开发 模型 是 跨越 整个 软件 生存 周期 的 系统 开发 .运行 和 维护 所 实施 的 全 部 工作 和 
任务 的 结构 框架 , 它 给 出 了 软件 开发 活动 各 阶段 之 间 的 关系 。 目 前 ,常见 的 软件 开发 模型 大 
致 可 分 为 如 下 三 种 类 型 。 

(1) 以 软件 需求 完全 确定 为 前 提 的 瀑布 模型 (Waterfall Model) 。 

(2) 在 软件 开发 初始 阶段 只 能 提供 基本 需求 时 采用 的 渐进 式 开发 模型 ,如 螺旋 模型 
(Spiral Model) 。 

(3) 以 形式 化 开发 方法 为 基础 的 变换 模型 (Transformational Model) 。 


1. 瀑布 模型 


瀑布 模型 是 最 早出 现 的 软件 开发 模型 ,在 软件 工程 中 占有 重要 的 地 位 , 它 提 供 了 软件 开 
发 的 基本 框架 。 其 过 程 是 从 上 一 项 活动 接收 该 项 活动 的 工作 对 象 作为 输入 ,利用 这 一 输入 
实施 该 项 活动 应 完成 的 内 容 给 出 该 项 活动 的 工作 成 果 , 并 作为 输出 传 给 下 一 项 活动 ,如 


图 3-6 所 示 。 
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图 3-6 瀑布 模型 


瀑布 模型 核心 思想 是 按 工序 将 问题 化 简 , 将 功能 的 实现 与 设计 分 开 , 便 于 分 工 协 作 , 即 
采用 结构 化 的 分 析 与 设计 方法 将 逻辑 实现 与 物理 实现 分 开 。 将 软件 生命 周期 划分 为 制定 计 
划 、 需 求 分 析 、 软 件 设计 、 程 序 编写 .软件 测试 和 运行 维护 6 个 基本 活动 ,并 且 规 定 了 它们 自 
上 而 下 、 相 互 衔接 的 固定 次 序 , 如 同 瀑布 流水 , 逐 级 下 落 。 

1) 瀑布 模型 的 优点 

CD 为 项 目 提 供 了 按 阶段 划分 的 检查 点 。 

(2) 当前 一 阶段 完成 后 ,只 需要 去 关注 后 续 阶 段 。 

(3) 可 在 迭代 模型 中 应 用 瀑布 模型 。 

A ERU HT A EOM. YER 1 解决 最 大 的 问题 。 每 次 迭代 产生 一 个 可 运行 的 版 
本 ,同时 增加 更 多 的 功能 。 每 次 迭代 必须 经 过 质量 和 集成 测试 。 

2) 瀑布 模型 的 缺点 

(1) 在 项 目 各 个 阶段 之 间 极 少 有 反馈 。 

(2) 只 有 在 项 目 生命 周期 的 后 期 才能 看 到 结果 。 

(3) 通过 过 多 的 强制 完成 日 期 和 里 程 碑 来 跟踪 各 个 项 目 阶 段 。 
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2. 原型 模型 


原型 模型 如 图 3-7 所 示 。 i m 
原型 模型 的 主要 思想 : 先 借用 已 有 系统 | | 原 
作为 原型 模型, 通过 “样品 "不 断 改 进 ,使 得 最 ! "1 
后 的 产品 就 是 用 户 所 需要 的 。 zz [mern 
原型 模型 通过 向 用 户 提供 原型 获取 用 户 — 反馈 
的 反馈 ,使 开发 出 的 软件 能 够 真正 反映 用 户 dl 
的 需求 。 同 时 ,原型 模型 采用 逐步 求 精 的 方 
:完善 原型 ,使 得 原型 能 够 “快速 "开发 ,避免 EUNTEM 
了 像 瀑布 模型 一 样 在 宛 长 的 开发 过 程 中 难以 EE ETER 
对 用 户 的 反馈 做 出 快速 的 响应 。 相 对 瀑布 模 
型 而 言 ,原型 模型 更 符合 人 们 开发 软件 的 习惯 ,是 目前 较 流 行 的 一 种 实用 软件 生存 期 模型 。 
1) 原型 模型 的 优点 
CD. 开发 人 员 和 用 户 在 “原型 "上 达成 一 致 。 这 样 一 来 ,可 以 减少 设计 中 的 错误 和 开发 中 
的 风险 ,也 减少 了 对 用 户 培训 的 时 间 , 从 而 提高 了 系统 的 实用 、 正 确 性 以 及 用 户 的 满意 程度 。 
(2) 缩短 了 开发 周期 ,加 快 了 工程 进度 。 
(3) 降低 成 本 。 
2) 原型 模型 的 缺点 
当 告诉 用 户 还 必须 重新 生产 该 产品 时 ,用 户 是 很 难 接受 的 。 这 往往 给 工程 继续 开展 带 
来 不 利 因素 。 
不 宜 利用 原型 系统 作为 最 终 产品 。 采 用 原型 模型 开发 系统 ,用 户 和 开发 者 必须 达成 一 
Sc. 原型 被 建造 仅仅 是 用 户 用 来 定义 需求 ,之 后 便 部 分 或 全 部 抛 开 ,最 终 的 软件 是 要 充分 考 
虑 了 质量 和 可 维护 性 等 方面 之 后 才 被 开发 出 来 。 


3. 螺旋 模型 


螺旋 模型 采用 一 种 周期 性 的 方法 来 进行 系统 开发 ,这 会 导致 开发 出 众多 的 中 间 版 本 。 
使 用 它 , 项 目 经 理 在 早期 就 能 够 为 客户 实证 某 些 概念 。 该 模型 是 快速 原型 法 ,以 进化 的 开发 
方式 为 中 心 ,在 每 个 项 目 阶 段 使 用 瀑布 模型 法 。 这 种 模型 的 每 一 个 周期 都 包括 需求 定义 、 风 
险 分 析 、 工 程 实现 和 评审 4 个 阶段 ,由 这 4 个 阶段 进行 迭代 。 软 件 开 发 过 程 每 迭代 一 次 ,软件 
开发 又 前 进 一 个 层次 。 采 用 螺旋 模型 的 软件 过 程 如 图 3-8 所 示 。 


和 螺旋 模型 基本 做 法 是 在 “瀑布 模型 ”的 每 一 个 开发 阶 自前 引入 
| E 个 非常 严格 的 风险 识别 、 风 险 分 析 和 风险 控制 , 它 把 软件 项 目 分 

E | 解 成 一 个 个 小 项 目 。 每 个 小 项 目 都 标识 一 个 或 多 个 主要 风险 , 直 
i B 到 所 有 的 主要 风险 因素 都 被 确定 。 

! s 螺旋 模型 强调 风险 分 析 , 使 得 开发 人 员 和 用 户 对 每 个 演化 层 
' 1 出 现 的 风险 有 所 了 解 ,继而 做 出 应 有 的 反应 ,因此 特别 适用 于 庞 
"sp. HH 大 、 复 杂 并 具有 高 风险 的 系统 。 对 于 这 些 系统 ,风险 是 软件 开发 不 


图 3-8 ”螺旋 模型 的 可 忽视 且 潜 在 的 不 利 因素 , 它 可 能 在 不 同 程度 上 损害 软件 开发 过 
软件 过 程 程 ,影响 软件 产品 的 质量 。 减 小 软件 风险 的 目标 是 在 造成 危害 之 
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前 ,及 时 对 风险 进行 识别 及 分 析 ,决定 采取 何 种 对 策 ,进而 消除 或 减少 风险 的 损害 。 
螺旋 模型 沿 着 螺 线 进行 若干 次 迭代 ,图 3-9 中 的 4 个 象限 代表 了 以 下 活动 。 
制定 计划 zt 风险 分 析 
决定 目标 评价 方案 
方案 和 限制 识别 风险 
消除 风险 


风险 分 析 


提交 线 
Hill 


开发 、 验 证 


下 一 产品 


客户 评估 


图 3-9 螺旋 模型 


(1) 制定 计划 : 确定 软件 目标 , 选 定 实施 方案 , 弄 清 项 目 开 发 的 限制 条 件 。 

(2) 风险 分 析 : 分 析 评 估 所 选 方案 ,考虑 如 何 识别 和 消除 风险 。 

(3) 实施 工程 : 实施 软件 开发 和 验证 。 

(4) 客户 评估 : 评价 开发 工作 ,提出 修正 建议 ,制定 下 一 步 计划 。 

螺旋 模型 由 风险 驱动 ,强调 可 选 方案 和 约束 条 件 从 而 支持 软件 的 重用 ,有 助 于 将 软件 质 
量 作 为 特殊 目标 融入 产品 开发 之 中 。 

螺旋 模型 很 大 程度 上 是 一 种 风险 驱动 的 方法 体系 ,因为 在 每 个 阶段 之 前 及 经 常 发 生 的 
循环 之 前 ,都 必须 首先 进行 风险 评估 。 在 实践 中 ,螺旋 法 技术 和 流程 变 得 更 为 简单 。 选 代 方 
法 体系 更 倾向 于 按照 开发 /设计 人 员 的 方式 工作 ,而 不 是 项 目 经 理 的 方式 。 螺 旋 模型 中 存在 
众多 变量 ,并且 在 将 来 会 有 更 大 幅度 的 增长 ,该 方法 体系 正良 好 运作 着 。 表 3-1 是 螺旋 法 能 


够 解决 的 各 种 问题 。 
表 3-1 螺旋 模型 解决 方案 

经 常 遇 到 的 问题 螺旋 模型 的 解决 方案 
用 户 需求 不 够 充分 允许 并 鼓励 用 户 反馈 信息 
沟通 不 明 在 项 目 早期 就 消除 严重 的 曲解 
刚性 的 体系 开发 首先 关注 重要 的 业务 和 问题 
EMEB 通过 测试 和 质量 保证 ,做 出 客观 的 评估 
潜在 的 不 一 臻 在 项 目 早期 就 发 现 不 一 致 问题 
糟糕 的 测试 和 质量 保证 从 第 一 次 迭代 就 开始 测试 


采用 瀑布 法 开发 在 早期 就 找 出 并 关注 风险 
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(1) 螺旋 模型 强调 风险 分 析 , 但 要 求 许多 客户 接受 和 相信 这 种 分 析 , 并 做 出 相关 反应 是 
不 容易 的 ,因此 ,这 种 模型 往往 适应 于 内 部 的 大 规模 软件 开发 。 

(2) 如 果 执 行 风险 分 析 将 大 大 影响 项 目的 利润 ,那么 进行 风险 分 析 毫 无 意义 ,因此 , 螺 
旋 模 型 只 适合 大 规模 软件 项 目 。 

(3) 软件 开发 人 员 应 该 擅长 寻找 可 能 的 风险 ,准确 地 分 析 风 险 ,否则 将 会 带 来 更 大 的 风险 。 

一 个 阶段 首先 是 确定 该 阶段 的 目标 ,完成 这 些 目标 的 选择 方案 及 其 约束 条 件 , 然 后 从 风 
险 角度 分 析 方 案 的 开发 策略 ,努力 排除 各 种 潜在 的 风险 ,有 时 需要 通过 建造 原型 来 完成 。 如 
果 某 些 风险 不 能 排除 ,该 方案 立即 终止 ,否则 启动 下 一 个 开发 步骤 。 最 后 ,评价 该 阶段 的 结 
果 , 并 设计 下 一 个 阶段 。 

1) 螺旋 模型 的 优点 

(1) 设计 上 的 灵活 性 ,可 以 在 项 目的 各 个 阶段 进行 变更 。 

(2) 以 小 的 分 段 来 构建 大 型 系统 ,使 成 本 计算 变 得 简单 容易 。 

(3) 客户 始终 参与 每 个 阶段 的 开发 ,保证 了 项 目 不 偏 离 正确 方向 以 及 项 目的 可 控 性 。 

(4) 随 着 项 目 推进 ,客户 始终 掌握 项 目的 最 新 信息 ,从 而 能 够 和 管理 层 有 效 地 交互 。 

(5) 客户 认可 这 种 公司 内 部 的 开发 方式 带 来 的 良好 的 沟通 和 高 质量 的 产品 。 

2) 螺旋 模型 的 缺点 

很 难 让 用 户 确信 这 种 演化 方法 的 结果 是 可 以 控制 的 。 建 设 周 期 长 ,而 软件 技术 发 展 比 
较 快 ,所 以 经 常 出 现 软件 开发 完毕 后 ,和 当前 的 技术 水 平 有 了 较 大 的 差距 ,无 法 满足 当前 用 
户 需求 。 


对 于 新 近 开 发 ,需求 不 明确 的 情况 下 ,适合 用 螺旋 模型 进行 开发 ,便于 风险 控制 和 需求 


变更 。 
6.3 单元 测试 
1. 单元 测试 概述 


单元 测试 (Unit Testing) 是 指 对 软件 中 的 最 小 可 测试 单元 进行 检查 和 验证 。 对 于 单元 
测试 中 单元 的 含义 ,一 般 来 说 ,要 根据 实际 情况 去 判定 其 具体 含义 ,如 C 语言 中 单元 指 一 个 
函数 ,Java 里 单元 指 一 个 类 ,图 形 化 的 软件 中 可 以 指 一 个 窗口 或 一 个 菜单 等 。 总 地 来 说 , 单 
元 就 是 人 为 规定 的 最 小 的 被 测 功能 模块 。 单 元 测试 是 在 软件 开发 过 程 中 要 进行 的 最 低级 别 
的 测试 活动 ,软件 的 独立 单元 将 在 与 程序 的 其 他 部 分 相隔 离 的 情况 下 进行 测试 。 

单元 测试 (模块 测试 ) 一 般 是 开发 者 编写 的 一 小 段 代码 ,用 于 检验 被 测 代码 的 一 个 很 小 
的 、 很 明确 的 功能 是 否 正确 。 通 常 而 言 ,一 个 单元 测试 是 用 于 判断 某 个 特定 条 件 ( 或 者 场景 ) 
下 某 个 特定 函数 的 行为 。 例 如 ,可 能 把 一 个 很 大 的 值 放 入 一 个 有 序 list 中 ,然后 确认 该 值 出 
现在 list 的 尾部 。 或 者 ,可 能 会 从 字符 串 中 删除 匹配 某 种 模式 的 字符 ,然后 确认 字符 串 中 不 
再 包含 这 些 字符 。 

单元 测试 是 由 程序 员 自 己 来 完成 的 ,最 终 受益 的 也 是 程序 员 自 己 。 可 以 这 么 说 ,程序 员 
有 责任 编写 功能 代码 ,同时 也 就 有 责任 为 自己 的 代码 编写 单元 测试 。 执 行 单元 测试 ,就 是 为 
了 证 明 这 段 代码 的 行为 和 期 望 功能 一 致 。 
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工厂 在 组 装 一 台电 视 机 之 前 ,会 对 每 个 元 件 都 进行 测试 ,这 就 是 单元 测试 。 其 实 我 们 每 
天 都 在 做 单元 测试 。 编 写 一 个 函数 ,除了 极 简单 的 外 ,总 是 要 执行 一 下 ,看 看 功能 是 否 正常 ， 
有 时 还 要 想 办 法 输出 些 数据 ,如 弹出 信息 窗口 ,这 也 是 单元 测试 。 这 种 单元 测试 称 为 临时 单 
元 测试 。 只 进行 了 临时 单元 测试 的 软件 ,针对 代码 的 测试 很 不 完整 ,代码 覆盖 率 要 超过 
70% 都 很 困难 ,未 覆盖 的 代码 可 能 遗留 大 量 的 细小 的 错误 ,这 些 错 误 还 会 互相 影响 , 当 软 件 
缺陷 暴露 出 来 的 时 候 难 于 调试 ,大 幅度 提高 后 期 测试 和 维护 成 本 ,也 降低 了 开发 商 的 竞争 
力 。 可 以 说 ,进行 充分 的 单元 测试 ,是 提高 软件 质量 ,降低 开发 成 本 的 必由之路 。 

对 于 程序 员 来 说 ,如 果 养 成 了 对 自己 写 的 代码 进行 单元 测试 的 习惯 ,不 但 可 以 写 出 高 质 
量 的 代码 ,而 且 还 能 提高 编程 水 平 。 

要 进行 充分 的 单元 测试 ,应 专门 编写 测试 代码 ,并 与 产品 代码 隔离 。 比 较 简单 的 办 法 是 
为 产品 工程 建立 对 应 的 测试 工程 ,为 每 个 类 建立 对 应 的 测试 类 ,为 每 个 函数 (很 简单 的 除外 ) 
建立 测试 函数 。 

一 般 认为 ,在 结构 化 程序 时 代 , 单 元 测试 所 说 的 单元 是 指 函 数 ,在 当今 的 面向 对 象 时 代 ， 
单元 测试 所 说 的 单元 是 指 类 。 以 实践 来 看 ,以 类 作为 测试 单位 ,复杂 度 高 ,可 操作 性 较 差 , 因 
此 仍然 主张 以 函数 作为 单元 测试 的 测试 单位 ,但 可 以 用 一 个 测试 类 来 组 织 某 个 类 的 所 有 测 
试 函 数 。 单 元 测试 不 应 过 分 强调 面向 对 象 ,因为 局 部 代码 依然 是 结构 化 的 。 单 元 测试 的 工 
作 量 较 大 ,简单 、 实 用、 高 效 才 是 进行 单元 测试 的 硬 道理 。 

有 一 种 看 法 是 ,只 测试 类 的 接口 (公有 函数 ) ,不 测试 其 他 函数 ,从 面向 对 象 角度 来 看 , 确 
实 有 其 道理 ,但 是 ,测试 的 目的 是 找 错 并 最 终 排 错 ,因此 ,只 要 是 包含 错误 的 可 能 性 较 大 的 函 
数 都 要 测试 , 跟 函 数 是 否 私 有 没有 关系 。 对 于 C++ 语言 来 说 ,可 以 用 一 种 简单 的 方法 区 隔 需 
测试 的 函数 : 简单 的 函数 如 数据 读 写 函数 的 实现 在 头 文件 中 编写 (inline 函数 ) ,所 有 在 源 文 
件 中 编写 实现 的 函数 都 要 进行 测试 (构造 函数 和 析 构 函数 除外 )。 

程序 员 编 写 代 码 时 ,一 定 会 反复 调试 保证 它 能 够 编译 通过 。 如 果 是 编译 没有 通过 的 代 
码 ,没有 任何 人 会 愿意 交付 。 但 代码 通过 编译 ,只 是 说 明了 它 的 语法 正确 ,无 法 保证 它 的 语 
义 也 一 定 正确 ,没有 任何 人 可 以 轻易 承诺 这 段 代码 的 行为 一 定 是 正确 的 。 

幸运 的 是 ,单元 测试 会 为 单位 功能 的 正确 性 承诺 做 保证 。 编 写 单元 测试 就 是 用 来 验证 
这 段 代 码 的 行为 是 否 与 期 望 的 一 致 。 有 了 单元 测试 ,程序 员 可 以 自信 地 交付 自己 的 代码 ,而 
没有 任何 的 后 顾 之 忧 。 

单元 测试 与 其 他 测试 不 同 , 单 元 测试 可 看 作 是 编码 工作 的 一 部 分 ,应 该 由 程序 员 完成 ， 
也 就 是 说 ,经 过 了 单元 测试 的 代码 才 是 已 完成 的 代码 ,提交 产品 代码 时 也 要 同时 提交 测试 代 
码 , 测 试 部 门 可 以 做 一 定 程度 的 审核 。 


2. 单元 测试 的 任务 


软件 测试 是 为 了 发 现 错误 而 执行 程序 的 过 程 。 它 是 根据 程序 开发 阶段 的 规格 说 明 及 程 
序 内 部 结构 而 精心 设计 的 一 批 测试 用 例 ( 输 入 数据 及 其 预期 结果 的 集合 ) ,并 利用 该 测试 用 
例 去 运行 程序 ,以 发 现 错误 的 过 程 。 软 件 测试 的 目的 是 为 了 尽早 尽 可 能 多 地 发 现 软件 中 的 
缺陷 ,提高 软件 产品 的 质量 。 

软件 的 单元 测试 是 测试 过 程 中 最 基本 的 测试 ,单元 是 软件 的 构成 基础 ,因此 单元 的 质量 
是 整个 软件 质量 的 基础 。 单 元 测试 是 软件 测试 过 程 中 直接 与 代码 相关 的 测试 , 它 对 其 他 测 
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试 步骤 的 进行 有 重要 影响 。 单 元 测试 在 软件 的 编码 阶段 进行 ,主要 完成 的 工作 是 根据 详细 
设计 说 明 书 编写 程序 源 代 码 ,包括 必要 的 数据 文件 ,并 进行 单元 测试 ,及 时 更 正 测试 问题 。 

单元 测试 包括 静态 的 代码 审查 和 动态 测试 两 个 阶段 。 代 码 审 查 阶段 对 程序 进行 静态 分 
析 , 包 括 编程 风格 检查 、 模 块 接口 检查 、 程 序 语言 检查 、 内 存 检查 、 比 较 和 转移 检查 、 性 能 检 
查 、 可 维护 性 检查 、 人 逻辑 检查 ,软件 多 余 物 检查 等 。 动 态 测试 阶段 首先 编写 驱动 模块 和 桩 模 
块 ,在 驱动 模块 和 桩 模块 中 设计 相应 的 测试 用 例 ,测试 用 例 应 该 覆盖 单元 模块 的 所 有 功能 
项 ,如 果 单 元 模块 有 性 能 等 其 他 测试 特性 要 求 , 则 必须 设计 相应 的 测试 用 例 测 试 这 些 特性 ， 
然后 运行 测试 ,比较 测试 结果 。 

单元 测试 的 任务 包括 模块 接口 测试 ,模块 局 部 数据 结构 测试 .模块 边界 条 件 测 试 模 块 
中 所 有 独立 执行 通路 测试 .模块 的 各 条 错误 处 理 通 路 测试 。 模 块 测试 是 单元 测试 的 基础 。 
只 有 在 数据 能 正确 流入 、 流 出 模块 的 前 提 下 ,其 他 测试 才 有 意义 。 检 查 局 部 数据 结构 是 为 了 
保证 临时 存储 在 模块 内 的 数据 在 程序 执行 过 程 中 完整 .正确 。 除 局 部 数据 外 ,如 果 可 能 , 单 
元 测试 时 还 应 该 查 清 全 局 数据 对 模块 的 影响 。 在 模块 中 应 对 每 一 条 独立 执行 路 径 进行 测 
试 ,单元 测试 的 基本 任务 是 保证 模块 中 每 条 语句 至 少 执行 一 次 。 一 个 好 的 设计 应 能 预见 各 
种 出 错 条 件 ,并 预 设 各 种 出 错 处 理 通路 。 边 界 条 件 测 试 是 单元 测试 中 最 后 也 是 最 重要 的 一 
项 任务 ,软件 经 常 在 边界 上 失效 ,采用 边界 值 分 析 技 术 , 针 对 边界 值 及 其 左右 设计 测试 用 例 。 


3. 单元 测试 工作 内 容 及 其 流程 
单元 测试 工作 内 容 及 其 流程 如 表 3-2 和 图 3-10 所 示 。 
表 3-2 单元 测试 工作 内 容 及 其 流程 


E a W A 给 出 参与 角色 和 职责 
制定 单元 测试 1， 详细 设计 h animan quaa mit B W RN 
计划 2 实现 代码 (可 选 ) iP bie 定单 元 测试 计划 

1 单元 测试 计划 L 单元 测试 用 例 WAUTA RANU 
设计 单元 测试 | 2 详细 设计 2. 已 设计 好 的 单元 测试 驱动 块 | 计 单元 测试 用 例 、 设 计 
3 实现 代码 (可 选 ) 3. 已 设计 好 的 单元 测试 桩 模块 | 驱动 程序 桩 
_ 1. 单元 测试 驱动 模块 程序 员 负 责编 写 测试 
oa kaunasataq 2 单元 测试 桩 模块 驱动 程序 和 稳定 柱 
1. 实现 代码 
2. 单元 测试 计划 
one ss L 测试 结果 程序 员 执行 测试 并 记 
执行 单元 测试 |3. 单元 测试 用 例 
: 结 
osa) 2. 测试 问题 报告 录 测 试 结果 
5. 单 元 测试 驱动 模块 和 柱 模 块 
oM WARE A B SCR 
评估 单元 测试 |) a 测试 评估 报告 售 此 次 测试 并 生成 测 
试 评估 报告 


4. 单元 测试 用 例 设计 方法 


现在 的 软件 几乎 都 是 用 事件 触发 来 控制 流程 的 .事件 触发 时 的 情景 便 形成 了 场景 ,而 同 
一 事件 不 同 的 触发 顺序 和 处 理 结果 就 形成 事件 流 。 这 种 在 软件 设计 方面 的 思想 也 可 以 引入 
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到 软件 测试 中 ,可 以 比较 生动 地 描绘 出 事件 触发 时 的 情景 ,有 利于 测试 设计 者 设计 测试 用 
例 ,同时 使 测试 用 例 更 容易 理解 和 执行 。 

基本 流 和 备 选 流 : 如 图 3-11 所 示 , 图 中 经 过 用 例 的 每 条 路 径 都 用 基本 流 和 备 选 流 来 表 
示 , 直 黑 线 表示 基本 流 ,是 经 过 用 例 的 最 简单 的 路 径 。 备 选 流 可 以 用 不 同 的 色彩 和 样式 表 
AR ,一 个 备 选 流 可 能 从 基本 流 开始 ,在 某 个 特定 条 件 下 执行 ,然后 重新 加 入 基本 流 中 (如 备 选 
流 1 和 3); 也 可 能 起 源 于 另 一 个 备 选 流 (如 备 选 流 2) ,或 者 终止 用 例 而 不 再 重新 加 入 到 某 


个 流 ( 如 备 选 流 2 和 4) 。 
u 单元 测试 > 
流程 开始 


1 
测试 设计 员 : 开发 设计 模型 、 实 现代 码 


1 
测试 设计 : 制定 单元 测试 计划 ， 设 计 单元 测试 用 例 ， 设 计 驱 动 程序 和 桩 


Y 
测试 员 : 实施 驱动 程序 和 桩 ， 执 行 单元 测试 ， 生 成 测试 日 志 


i i 


测试 设计 员 & 测 试 员 : 提出 变更 请 求 测试 设计 员 : 评估 单元 测试 ， 生 成 评估 报告 


Y 
变更 流程 


结束 
图 3-10 单元 测试 工序 
案例 : ATM 的 流程 示意 图 如 图 3-12 所 示 。 


开始 用 例 
备 选 流 3 
提 款 
备 选 流 4 客户 转账 S 
i 备 选 流 2 
银行 系统 
= 存款 
结束 用 例 
结束 用 例 ATM 操 作 员 系统 启动 


3-11 用 例 设计 流程 图 3-12 ATM 场景 图 
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场景 设计 : 如 表 3-3 所 示 是 生成 的 ATM 场景 。 


表 3-3 场景 设计 

场景 1 一 一 成 功 提 款 基本 流 

场景 2 一 一 ATM 内 没有 现金 基本 流 备 选 流 2 
场景 3 一 一 ATM 内 现金 不 足 基本 流 备 选 流 3 
场景 4 一 一 PIN 有 误 ( 还 有 输入 机 会 ) 基本 流 备 选 流 4 
场景 5 一 一 PIN 有 误 (不 再 有 输入 机 会 ) 基本 流 备 选 流 4 
场景 6 一 一 账户 不 存在 /账户 类 型 有 误 基本 流 备 选 流 5 
场景 7 一 一 账户 余额 不 足 基本 流 备 选 流 6 


ik. 为 方便 起 见 , 备 选 流 3 和 6( 场 景 3 和 7) 内 的 循环 以 及 循环 组 合 未 纳入 表 3-3 中 。 


用 例 设计 ; 对 于 这 7 个 场景 中 的 每 一 个 场景 都 需要 确定 测试 用 例 。 可 以 采用 和 矩阵 或 决 
策 表 来 确定 和 管理 测试 用 例 。 下 面 显示 了 一 种 通用 格式 ,其 中 各 行 代表 各 个 测试 用 例 , 而 各 
列 则 代表 测试 用 例 的 信息 。 本 示例 中 ,对 于 每 个 测试 用 例 , 存 在 一 个 测试 用 例 ID、 条 件 ( 或 
说 明 ) ,测试 用 例 中 涉及 的 所 有 数据 元 素 (作为 输入 或 已 经 存在 于 数据 库 中 ) 以 及 预期 结果 。 


表 3-4 测试 用 例 

SEE eam 
CW1 场景 1: 成 功 提 款 V V V V V “| 成 功 提 款 
mE I v 2 v v I e eom 

7 2 s 
pæn iid 3; ATM 内 现金 v y " i s Pere 
Z8 sassa [v| = [|> Patas 
22 amas [v| we | v| + cn 
CW6 ibn ird k |. n/a v v ei lee 


数据 设计 : 一 旦 确定 了 所 有 的 测试 用 例 , 则 应 对 这 些 用 例 进行 复审 和 验证 以 确保 其 准 
确 且 适度 ,并 取消 多 余 或 等 效 的 测试 用 例 。 

测试 用 例 一 经 认可 ,就 可 以 确定 实际 数据 值 (在 测试 用 例 实施 矩阵 中 ) 并 且 设 定 测试 数 
据 , 如 表 3-5 所 示 。 


Rs ”测试 用 例 表 
TC( 测 试用 输入 (或 选择 ) Wk fi ATM 内 的 
例 )ID 号 人 PN ES | aem WO em TPAR 


成 功 提 款 。 账 户 余 
额 被 更 新 为 450. 00 
场景 2: ATM 内 没有 提 款 选项 不 可 用 ,用 


CW2 4987 |809-498 100. 00 500.0 0. 00 
现金 例 结束 


CWi | 场景 1: 成功 提 款 4987 |809-498 | 50. 00 500.0| 2000 
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ET 
WEM awas [mes amas anun 
CW3 ed $: ATM ALS 4987 |809-498 100. 00 500.0| 70.00 inel iwa j 
CW4 es bein 4978 |809-498 n/a 500. 00| 2000 . wd peg 
CW5 5 is 4978 |809-498 n/a 500. 00| 2000 Lr rein 
CW6 piel 误 ( 不 4978 |809-498 n/a 500. 00| 2000 : TER 
1) 等 价 类 划分 法 


等 价 类 是 指 某 个 输入 域 的 子 集合 。 在 该 子 集合 中 ,各 个 输入 数据 对 于 揭露 程序 中 的 错 
误 都 是 等 效 的 ,并 合理 地 假定 : 测试 某 等 价 类 的 代表 值 就 等 于 对 这 一 类 其 他 值 的 测试 , 因 
此 ,可 以 把 全 部 输入 数据 合理 划分 为 若干 等 价 类 ,在 每 一 个 等 价 类 中 取 一 个 数据 作为 测试 的 
输入 条 件 就 可 以 用 少量 代表 性 的 测试 数据 取得 较 好 的 测试 结果 。 等 价 类 划分 可 有 两 种 不 同 
的 情况 : 有 效 等 价 类 和 无 效 等 价 类 。 

(1) 有 效 等 价 类 

它 是 指 对 于 程序 的 规格 说 明 来 说 是 合理 的 、 有 意义 的 输入 数据 构成 的 集合 。 利 用 有 效 
等 价 类 可 检验 程序 是 否 实现 了 规格 说 明 中 所 规定 的 功能 和 性 能 。 

(2) 无 效 等 价 类 

它 与 有 效 等 价 类 的 定义 恰巧 相反 。 无 效 等 价 类 指 对 程序 的 规格 说 明 是 不 合理 的 或 无 意 
义 的 输入 数据 所 构成 的 集合 。 对 于 具体 的 问题 ,无 效 等 价 类 至 少 应 有 一 个 ,也 可 能 有 多 个 。 

设计 测试 用 例 时 ,要 同时 考虑 这 两 种 等 价 类 。 因 为 软件 不 仅 要 能 接收 合理 的 数据 ,也 要 
能 经 受 意外 的 考验 ,这 样 的 测试 才能 确保 软件 具有 更 高 的 可 靠 性 。 

(3) 划分 等 价 类 的 标准 

(D 完备 测试 、 避 免 元 余 。 

O 划分 等 价 类 重要 的 是 : 集合 的 划分 ,划分 为 互 不 相交 的 一 组 子 集 ,而 子 集 的 并 是 整 
个 集合 。 

@ 并 是 整个 集合 : 完备 性 。 

OD 子 集 互 不 相交 : 保证 一 种 形式 的 无 元 余 性 。 

© 同一 类 中 标识 (选择 ) 一 个 测试 用 例 , 同 一 等 价 类 中 ,往往 处 理 相同 ,相同 处 理 映射 到 
“相同 的 执行 路 径 ”。 

(4) 划分 等 价 类 的 方法 

CD 在 输入 条 件 规定 了 取 值 范围 或 值 的 个 数 的 情况 下 , 则 可 以 确立 一 个 有 效 等 价 类 和 两 
个 无 效 等 价 类 。 例 如 ,输入 值 是 学 生成 绩 , 范 围 是 0 一 100, 如 图 3-13 所 示 。 

@ 在 输入 条 件 规定 了 输入 值 的 集合 或 者 规定 了 “必须 如 何 ” 的 条 件 的 情况 下 ,可 确立 一 
个 有 效 等 价 类 和 一 个 无 效 等 价 类 。 

@ 在 输入 条 件 是 一 个 布尔 量 的 情况 下 ,可 确定 一 个 有 效 等 价 类 和 一 个 无 效 等 价 类 。 
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0 100 


DTE MEER CU DEEP CDS 
成 绩 <0 0 去 成 绩 生 100 成 绩 >100 
图 3-13 学 生成 绩 的 等 价 类 划分 


@ 在 规定 了 输入 数据 的 一 组 值 (假定 个 ) ,并 且 程序 要 对 每 一 个 输入 值 分 别处 理 的 情 
况 下 ,可 确立 nn 个 有 效 等 价 类 和 一 个 无 效 等 价 类 。 

例如 ,输入 条 件 说 明 学 历 可 为 专科 本科、 硕士 .博士 四 种 之 一 , 则 分 别 取 4 个 值 作为 
4 个 有 效 等 价 类 ,另外 把 4 种 学 历 之 外 的 任何 学 历 作为 无 效 等 价 类 。 

C) 在 规定 输入 数据 必须 遵守 的 规则 的 情况 下 ,可 确立 一 个 有 效 等 价 类 (符合 规则 ) 和 若 
干 个 无 效 等 价 类 (从 不 同 角度 违反 规则 )。 

© 在 确 知已 划分 的 等 价 类 中 各 元 素 在 程序 处 理 中 的 方式 不 同 的 情况 下 , 则 应 再 将 该 等 
价 类 进一步 地 划分 为 更 小 的 等 价 类 。 

(5) 设计 测试 用 例 

在 确立 等 价 类 后 ,可 建立 等 价 类 表 , 列 出 所 有 划分 出 的 等 价 类 输入 条 件 。 然 后 从 划分 出 
的 等 价 类 中 按 以 下 三 个 原则 设计 测试 用 例 。 

CD 为 每 一 个 等 价 类 规定 一 个 唯一 的 编号 ; 

@ 设计 一 个 新 的 测试 用 例 , 使 其 尽 可 能 多 地 覆盖 尚未 被 覆盖 的 有 效 等 价 类 ,重复 这 一 
步 , 直 到 所 有 的 有 效 等 价 类 都 被 覆盖 为 止 ; 

@ 设计 一 个 新 的 测试 用 例 , 使 其 仅 覆 盖 一 个 尚未 被 覆盖 的 无 效 等 价 类 ,重复 这 一 步 , 直 
到 所 有 的 无 效 等 价 类 都 被 覆盖 为 止 。 

2) 边界 值 分 析 方 法 

边界 值 分 析 法 就 是 对 输入 或 输出 的 边界 值 进行 测试 的 一 种 黑 盒 测试 方法 。 通 常 边 
界 值 分 析 法 是 作为 对 等 价 类 划分 法 的 补充 ,在 这 种 情况 下 ,其 测试 用 例 来 自 等 价 类 的 
边界 。 

长 期 的 测试 工作 经 验 告诉 我 们 ,大 量 的 错误 是 发 生 在 输入 或 输出 范围 的 边界 上 ,而 
不 是 发 生 在 输入 输出 范围 的 内 部 。 因 此 针对 各 种 边界 情况 设计 测试 用 例 , 可 以 查 出 更 多 
的 错误 。 

使 用 边界 值 分 析 方 法 设计 测试 用 例 ,首先 应 确定 边界 情况 。 通 常 输入 和 输出 等 价 类 的 
边界 ,就 是 应 着 重 测试 的 边界 情况 。 应 当选 取 正好 等 于 ,刚刚 大 于 或 刚刚 小 于 边界 的 值 作为 
测试 数据 ,而 不 是 选取 等 价 类 中 的 典型 值 或 任意 值 作为 测试 数据 。 

常见 的 边界 值 有 以 下 几 种 。 

(D 对 16b 的 整数 而 言 ,32 767 和 一 32 768 是 边界 。 

© 屏幕 上 光标 在 最 左上 、 最 右 下 位 置 。 

@ 报表 的 第 一 行 和 最 后 一 行 。 

@ 数组 元 素 的 第 一 个 和 最 后 一 个 。 

C) 循环 的 第 0 次 .第 一 次 和 倒数 第 二 次 .最 后 一 次 。 

边界 值 分 析 使 用 与 等 价 类 划分 法 相同 的 划分 ,只 是 边界 值 分 析 假 定 错误 更 多 地 存在 于 
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划分 的 边界 上 ,因此 在 等 价 类 的 边界 上 以 及 两 侧 的 情况 设计 测试 用 例 。 

例如 ,测试 计算 平方 根 的 函数 。 

输入 : 实数 

输出 : 实数 

规格 说 明 : 当 输入 一 个 0 或 比 0 大 的 数 的 时 候 ,返回 其 正平 方 根 ; 当 输 入 一 个 小 于 0 的 
数 时 ,显示 错误 信息 “平方 根 非法 -输入 值 小 于 0” 并 返回 0; 库 函 数 Print-Line 可 以 用 来 输出 
错误 信息 。 

(1) 可 以 考虑 做 出 如 下 划分 。 

输入 : 二 0 和 @ 宇 0。 

输出 : DO 三 0 和 @Error。 

(2) 测试 用 例 有 两 个 : 

(D 输入 4, 输 出 2。 

© 输入 一 10, 输 出 0 和 错误 提示 。 

第 一 组 划分 的 边界 为 0 和 最 大 正 实数 ; 第 二 组 划分 的 边界 为 最 小 负 实 数 和 0。 由 此 得 
到 以 下 测试 用 例 。 

(1) 输入 { 最 小 负 实数 } 

(2) 输入 {绝对 值 很 小 的 负数 } 

(3) 输入 0 

(4) 输入 {绝对 值 很 小 的 正 数 } 

(5) 输入 {最 大 正 实数 } 

常见 等 价 类 划分 方法 如 表 3-6 所 示 。 

表 3-6 常见 等 价 类 划分 方法 
项 ài 界 值 测试 用 例 的 设计 思路 

假设 一 个 文本 输入 区 域 允许 输入 1 一 255 个 字符 ,输入 1 个 和 255 个 字符 作 
为 有 效 等 价 类 ; 输入 0 个 和 256 个 字符 作为 无 效 等 价 类 ,这 几 个 数值 都 属 
于 边界 条 件 值 
假设 某 软件 的 数据 输入 域 要 求 输入 5 位 的 数据 值 ,可 以 使 用 10 000 作为 最 
数值 | 最 小 值 一 1/ 最 大 值 十 1 | 小 值 .99 999 作为 最 大 值 ; 然后 使 用 刚好 小 于 5 位 和 大 于 5 位 的 数值 来 作 
为 边界 条 件 
小 于 空余 空间 一 点 儿 /| 例如 ,在 用 口 盘 存储 数据 时 ,使 用 比 剩余 磁盘 空间 大 一 点 儿 ( 几 KB) 的 文件 
大 于 满 空间 一 点 儿 ”| 作为 边界 条 件 


起 始 一 1 个 字符 /结束 


字符 | +1 个 字符 


空间 


在 多 数 情况 下 ,边界 值 条 件 是 基于 应 用 程序 的 功能 设计 而 需要 考虑 的 因素 ,可 以 从 软件 
的 规格 说 明 或 常识 中 得 到 ,也 是 最 终 用 户 可 以 很 容易 发 现 问题 的 。 然 而 ,在 测试 用 例 设 计 过 
程 中 , 某 些 边 界 值 条 件 是 不 需要 呈现 给 用 户 的 ,或 者 说 用 户 是 很 难 注意 到 的 ,但 同时 确实 属 
于 检验 范畴 内 的 边界 条 件 , 称 为 内 部 边界 值 条 件 或 子 边 界 值 条 件 。 

内 部 边界 值 条 件 主 要 有 下 面 几 种 。 

CD 数值 的 边界 值 检验 : 计算 机 是 基于 二 进 制 进行 工作 的 ,因此 ,软件 的 任何 数值 运算 
都 有 一 定 的 范围 限制 ,如 表 3-7 所 示 。 
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表 3-7 数值 的 边界 值 

项 范围 或 值 
位 (bit) 0 或 1 
字 节 (byte) 0~255 
(word) 0 一 65 535( 单 字 ) 或 0 一 4 294 967 295( 双 字 ) 
TOO 1024 
JKM) 1 048 576 
吉 (G) 1073 741 824 


(2) 字符 的 边界 值 检验 : 在 计算 机 软件 中 ,字符 也 是 很 重要 的 表示 元 素 , 其 中 ASCII 和 
Unicode 是 常见 的 编码 方式 。 表 3-8 中 列 出 了 一 些 常用 字符 对 应 的 ASCII 码 值 。 


表 3-8 字符 的 边界 值 


字符 ASCII f ffi 字符 ASCII 码 值 
Z3 (null) 0 A 65 
空格 (space) 32 a 97 
斜 杠 ( / ) 47 Z 90 
0 48 z 122 
冒号 ( : ) 58 单 引 号 (“ ) 96 
e 64 


基于 边界 值 分 析 方 法 选择 测试 用 例 的 原则 如 下 。 

(1) 如 果 输 入 条 件 规定 了 值 的 范围 , 则 应 取 刚 达到 这 个 范围 的 边界 的 值 , 以 及 刚刚 超越 
这 个 范围 边界 的 值 作为 测试 输入 数据 。 

例如 ,如 果 程 序 的 规格 说 明 中 规定 :“ 重 量 在 10 一 50kg 范围 内 的 邮件 ,其 邮费 计算 公式 
为 …… ”作为 测试 用 例 , 应 取 10 及 50, 还 应 取 10.01,49.99,9.99 及 50.01 等 。 

(2) 如 果 输 入 条 件 规定 了 值 的 个 数 , 则 用 最 大 个 数 , 最 小 个 数 , 比 最 小 个 数 少 1, 比 最 大 
个 数 多 1 的 数 作为 测试 数据 。 

例如 ,一 个 输入 文件 应 包括 1 一 255 个 记录 , 则 测试 用 例 可 取 1 和 255, 还 应 取 0 及 
256 等 。 

(3) 将 规则 (1) 和 (2) 应 用 于 输出 条 件 , 即 设计 测试 用 例 使 输出 值 达到 边界 值 及 其 左右 
的 值 。 

例如 , 某 程序 的 规格 说 明 要 求 计算 出 “每 月 保险 金 扣除 额 为 0 一 1165. 25 元 ”, 其 测试 用 
例 可 取 0. 00 及 1165. 24、 还 可 取 0.01 及 1165.26 等 。 

再 如 一 程序 属于 情报 检索 系统 ,要 求 每 次 “最 少 显示 1 条 、 最 多 显示 4 条 情报 摘要 ”, 这 
时 应 考虑 的 测试 用 例 包括 1 和 4, 还 应 包括 0 和 5 等 。 

(4) 如 果 程 序 的 规格 说 明 给 出 的 输入 域 或 输出 域 是 有 序 集合 , 则 应 选取 集合 的 第 一 个 
元 素 和 最 后 一 个 元 素 作为 测试 用 例 。 

(5) 如 果 程 序 中 使 用 了 一 个 内 部 数据 结构 , 则 应 当选 择 这 个 内 部 数据 结构 的 边界 上 的 
值 作为 测试 用 例 。 

(6) 分 析 规 格 说 明 , 找 出 其 他 可 能 的 边界 条 件 。 

案例 : 现 有 一 个 学 生 标准 化 考试 批阅 试卷 ,产生 成 绩 报 告 的 程序 。 其 规格 说 明 如 下 : 
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程序 的 输入 文件 由 一 些 有 80 个 字符 的 记录 组 成 ,如 图 3-14 所 示 , 所 有 记录 分 为 三 组 。 


(试题 部 分 ) 
[ 标题 

1 80 
[试题 数 标准 答案 (1-50 题 ) 2 

1 34 910 59 60 7980 
[试题 数 标准 答案 (51~100 题 ) 2 

1 34 910 59 60 79 80 

(学 生 答卷 部 分 ) 
[z 学 生 答案 (1~50 题 ) 3 

1 910 59 60 79 80 
[81 学 生 答案 51~100 题 ) 3 

1 910 k 5960 7980 


图 3-14 试卷 批阅 输入 文件 记录 


CD 标题 : 这 一 组 只 有 一 个 记录 ,其 内 容 为 输出 成 绩 报告 的 名 字 。 

(2) 试卷 各 题 标准 答案 记录 : 每 个 记录 均 在 第 80 个 字符 处 标 以 数字 "2”。 该 组 的 第 一 
个 记录 的 第 1 一 3 个 字符 为 题目 编号 ( 取 值 为 1 一 999) 。 第 10 一 59 个 字符 给 出 第 1 一 50 Bi 
的 答案 (每 个 合法 字符 表示 一 个 答案 )。 该 组 的 第 2, 第 3… 个 记录 相应 为 第 51 一 100, 第 
101 一 150,… 题 的 答案 。 

输入 条 件 及 相应 测试 用 例如 表 3-9 所 示 。 


表 3-9 输入 条 件 及 相应 测试 用 例 


测试 用 例 


试题 数 


标准 答案 记录 


学 生 人 数 


学 生 答 题 


空 输入 文件 

没有 标题 

标题 只 有 一 个 字符 

标题 有 80 个 字符 

试题 数 为 1 

试题 数 为 50 

试题 数 为 51 

试题 数 为 100 

试题 数 为 0 

试题 数 含 有 非 数字 字符 

没有 标准 答案 记录 ,有 标题 

标准 答案 记录 多 于 一 个 

标准 答案 记录 少 一 个 

0 个 学 生 

1 个 学 生 

200 个 学 生 

201 个 学 生 

某 学 生 只 有 一 个 回答 记录 ,但 有 两 个 标准 答案 记录 
该 学 生 是 文件 中 的 第 一 个 学 生 

该 学 生 是 文件 中 的 最 后 一 个 学 生 ( 记 录 数 出 错 的 学 生 ) 
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输入 条 件 测试 用 例 

学 生 答 题 某 学 生 有 两 个 回答 记录 ,但 只 有 一 个 标准 答案 记录 
该 学 生 是 文件 中 的 第 一 个 学 生 ( 记 录 数 出 错 的 学 生 ) 
该 学 生 是 文件 中 的 最 后 一 个 学 生 

学 生成 绩 所 有 学 生 的 成 绩 都 相等 
每 个 学 生 的 成 绩 都 不 相等 
部 分 学 生 的 成 绩 相 同 
(检查 是 否 能 按 成 绩 正确 排名 次 ) 
有 个 学 生 0 分 
有 个 学 生 100 分 


表 3-10 是 输出 条 件 及 相应 的 测试 用 例 表 。 
表 3-10 输出 条 件 及 相应 的 测试 用 例 表 


输出 条 件 测试 用 例 

输出 报告 a、b 有 个 学 生 的 学 号 最 小 (检查 按 序号 排序 是 否 正确 ) 
有 个 学 生 的 号 最 大 (检查 按 序号 排序 是 否 正确 ) 
适当 的 学 生 人 数 , 使 产生 的 报告 刚好 满 一 页 (检查 打印 页 数 ) 
学 生 人 数 比 刚才 多 出 1 人 (检查 打印 换 页 ) 

输出 报告 c 平均 成 绩 100 
平均 成 绩 0 
标准 偏差 为 最 大 值 ( 有 一 半 的 0 分 ,其 他 100 分 ) 
标准 偏差 为 0( 所 有 成 绩 相等 ) 

输出 报告 d 所 有 学 生 都 答对 了 第 一 题 
所 有 学 生 都 答 错 了 第 一 题 
所 有 学 生 都 答对 了 最 后 一 题 
所 有 学 生 都 答 错 了 最 后 一 题 
选择 适当 的 试题 数 ,是 第 4 个 报告 刚好 打 满 一 页 
试题 数 比 刚才 多 1, 使 报告 打 满 一 页 后 ,刚好 剩 下 一 题 未 打 


(3) 每 个 学 生 的 答卷 描述 : 该 组 中 每 个 记录 的 第 80 个 字符 均 为 数字 “3”。 每 个 学 生 的 
答卷 在 若干 个 记录 中 给 出 。 如 甲 的 首 记录 第 1 一 9 字符 给 出 学 生 姓 名 及 学 号 ,第 10 一 59 字 
符 列 出 的 是 甲 所 做 的 第 1 一 50 题 的 答案 。 若 试题 数 超过 50, 则 第 2, 第 3… 记 录 分 别 给 出 他 
的 第 51 一 100, 第 101 一 150… 题 的 解答 。 然 后 是 学 生 乙 的 答卷 记录 。 

(4) 学 生 人 数 不 超过 200 ,试题 数 不 超 过 999 。 

(5) 程序 的 输出 有 4 个 报告 : 

CD 按 学 号 排列 的 成 绩 单 , 列 出 每 个 学 生 的 成 绩 、 名 次 。 

© 按 学 生成 绩 排 序 的 成 绩 单 。 

@ 平均 分 数 及 标准 偏差 的 报告 。 

@ 试题 分 析 报 告 。 按 试题 号 排序 , 列 出 各 题 学 生 答对 的 百分比 。 

解答 : 分 别 考虑 输入 条 件 和 输出 条 件 ,以 及 边界 条 件 。 给 出 如 表 3-9 所 示 的 输入 条 件 
及 相应 的 测试 用 例 。 
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3) 因果 图 法 

因果 图 法 是 一 种 利用 图 解法 分 析 输 入 的 各 种 组 合 情 况 ,从 而 设计 测试 用 例 的 方法 , 它 适 
合 检查 程序 输入 条 件 的 各 种 组 合 情 况 。 

等 价 类 划分 法 和 边界 值 分 析 方 法 都 是 着 重 考虑 输入 条 件 ,但 没有 考虑 输入 条 件 的 各 种 
组 合 . 输 入 条 件 之 间 的 相互 制约 关系 。 这 样 虽然 各 种 输入 条 件 可 能 出 错 的 情况 已 经 测试 到 ， 
但 多 个 输入 条 件 组 合 起 来 可 能 出 错 的 情况 却 被 忽视 了 。 

如 果 在 测试 时 必须 考虑 输入 条 件 的 各 种 组 合 , 则 可 能 的 组 合 数目 将 是 天 文 数字 ,因此 必 
须 考虑 采用 一 种 适合 描述 多 种 条 件 的 组 合 .相应 产生 多 个 动作 的 形式 来 进行 测试 用 例 的 设 
计 , 这 就 需要 利用 因果 图 (逻辑 模型 )。 

图 3-15 中 4 种 符号 分 别 表示 了 规格 说 明 中 的 4 种 
因果 关系 。 

因果 图 中 使 用 了 简单 的 逻辑 符号 ,以 直线 连接 左右 O77 qus 


入 点 。 左 节点 表示 输入 状态 (或 称 原因 ), 右 节点 表示 输 《C) @ 

出 状态 (或 称 结果 )。C 表示 原因 ,通常 置 于 图 的 左 部 ， (G) DA 
e; 表示 结果 ,通常 在 图 的 右 部 。C, e 均 可 取 值 0 或 1， 

0 表示 某 状 态 不 出 现 ,1 表示 某 状态 出 现 。 (€) © 


OD XX (c) sk (d) 5 
(D 人 恒 等 : dr C, JE 1, 9l] e; 也 是 1; 否则 e; 为 0。 图 3-15 4 种 因果 关系 


加 非 : 若 Ci 是 1, 则 e 是 0; 否则 e; 是 1。 

© R: # C, RC SX C, 是 1, 则 e 是 1; 否则 e 为 0。“ 或 "可 有 任意 个 输入 。 

© 与 : 若 C 和 Cs 都 是 1, 则 为 1; 否则 e 为 0。“ 与 "也 可 有 任意 个 输入 。 

(2) 约束 

输入 状态 相互 之 间 还 可 能 存在 某 些 依赖 关系 , 称 为 约束 。 例 如 , 某 些 输入 条 件 本 身 
不 可 能 同时 出 现 。 输 出 状态 之 间 也 往往 存在 约束 。 在 因果 图 中 ,用 特定 的 符号 标明 这 些 
Wk, 

D 输入 条 件 约束 类 型 

。 下 约束 ( 异 ): a 和 b 中 至 多 有 一 个 可 能 为 1, 即 a 和 b 不 能 同时 为 1。 

。 工 约束 (或 ) : a.b 和 ec 中 至 少 有 一 个 必须 是 1, 即 ab 和 cc 不 能 同时 为 0。 

。 O 约束 (唯一 ); a 和 b 必须 有 一 个 , 且 仅 有 一 个 为 1。 

。R 约束 (要 求 ) : a 是 1 时 ,b 必须 是 1, 即 不 可 能 a 是 1 时 b 是 0。 

@ 输出 条 件 约束 类 型 

输出 条 件 的 约束 只 有 M 约束 (强制 ): 车 结果 a 是 1, 则 结果 b 强制 为 0。 

因果 图 输入 ,输出 条 件 约束 如 图 3-16 所 示 。 采 用 因果 图 法 设计 测试 用 例 的 步 又 
如 下 。 

CD. 分 析 软 件 规格 说 明 描 述 中 ,哪些 是 原因 ( 即 输入 条 件 或 输入 条 件 的 等 价 类 ) ,哪些 是 
结果 ( 即 输出 条 件 ) ,并 给 每 个 原因 和 结果 赋予 一 个 标识 符 。 

(2) 分 析 软 件 规格 说 明 描 述 中 的 语义 , 找 出 原因 与 结果 之 间 、 原 因 与 原因 之 间 对 应 的 关 
系 ,根据 这 些 关 系 画 出 因果 图 。 

(3) 由 于 语法 或 环境 限制 ,有 些 原因 与 原因 之 间 ,原因 与 结果 之 间 的 组 合 情 况 不 可 能 出 
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图 3-16 因果 图 约束 


现 , 为 表明 这 些 特 殊 情 况 , 在 因果 图 上 用 一 些 记号 表明 约束 或 限制 条 件 。 

(4) 把 因果 图 转换 为 判定 表 。 

(5) 把 判定 表 的 每 一 列 拿 出 来 作为 依据 ,设计 测试 用 例 。 

案例 : 某 软件 规格 说 明 书包 含 这 样 的 要 求 , 第 一 列 字符 必须 是 A 或 B, 第 二 列 字符 必须 
是 一 个 数字 ,在 此 情况 下 进行 文件 的 修改 ,但 如 果 第 一 列 字符 不 正确 , 则 给 出 信息 L; 如 果 
第 二 列 字符 不 是 数字 , 则 给 出 信息 M. 


NUR. 
CD 根据 题 意 ,原因 和 结果 如 下 : 
原因 : 


1 一 第 一 列 字符 是 A 

2 一 一 第 一 列 字符 是 B; 

3 一 一 第 二 列 字符 是 一 数字 。 

结果 ， © 
21 一 一 修改 文件 ; O (D Í 


22 一 一 给 出 信息 L; O (a) 
@ 


23 一 一 给 出 信息 M. 
(2) 其 对 应 的 因果 图 如 图 3-17 所 示 。 
11 为 中 间 节 点 ; 考虑 到 原因 1 和 原因 2 不 


可 能 同时 为 1, 故 在 因果 图 上 施加 E 约束 。 msn PORUM 
(3) 根据 因果 图 建立 判定 表 , 如 表 3-11 所 示 。 
表 3-11 HER 
1 2 3 4 5 6 7 8 
1 š 1 2? 1 0 0 0 0 
2 1 1 0 0 1 1 0 0 
条 件 (原因 ) 8 1 0 1 0 1 0 1 0 
11 1 1 1 1 0 0 
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# 
1 2 3 4 5 6 7 8 
22 0 0 0 0 1 š 
动作 (结果 ) 21 1 0 1 0 0 0 
23 0 1 0 1 0 1 
A3 AM B5 BN C2 DY 
测试 用 例 
A8 A? B4 B! X6 P 


表 3-11 中 8 种 情况 的 左面 两 列 情况 中 ,原因 和 原因 @@ 同 时 为 1, 这 是 不 可 能 出 现 
的 , 故 应 排除 这 两 种 情况 。 表 的 最 下 一 栏 给 出 了 6 种 情况 的 测试 用 例 ,这 是 我 们 所 需要 的 
数据 。 

4) 错误 推测 方法 

错误 推测 方法 是 基于 经 验 和 直觉 推测 程序 中 所 有 可 能 存在 的 各 种 错误 ,从 而 有 针对 性 
地 设计 测试 用 例 的 方法 。 

列举 出 程序 中 所 有 可 能 有 的 错误 和 容易 发 生 错误 的 特殊 情况 ,根据 它们 选择 测试 用 例 。 

例如 ,输入 数据 和 输出 数据 为 0 的 情况 ; 输入 表格 为 空格 或 输入 表格 只 有 一 行 。 这 些 
都 是 容易 发 生 错误 的 情况 。 可 选择 这 些 情况 下 的 例子 作为 测试 用 例 。 

再 如 ,前 面 例子 中 成 绩 报告 的 程序 ,采用 错误 推测 法 还 可 补充 设计 以 下 一 些 测试 用 例 。 

CD 程序 是 否 把 空格 作为 回答 。 

(2) 在 回答 记录 中 混 有 标准 答案 记录 。 

(3) 除了 标题 记录 外 ,还 有 一 些 记 录 最 后 一 个 字符 既 不 是 2 也 不 是 3。 

(4) 有 两 个 学 生 的 学 号 相同 。 

(5) 试题 数 是 负数 。 

再 如 ,测试 一 个 对 线性 表 ( 例 如 数组 ) 进 行 排序 的 程序 ,可 推测 列 出 以 下 几 项 需要 特别 测 
试 的 情况 。 

CD 输入 的 线性 表 为 空 表 ; 

(2) 表 中 只 含有 一 个 元 素 ; 

(3) 输入 表 中 所 有 元 素 已 排 好 序 ， 

(4) 输入 表 已 按 逆序 排 好 ; 

(5) 输入 表 中 部 分 或 全 部 元 素 相同 。 


6.4 集成 测试 


集成 测试 (也 叫 组 装 测试 ,联合 测试 ) 是 单元 测试 的 迎 辑 扩展 。 它 的 最 简单 的 形式 是 : 
两 个 已 经 测试 过 的 单元 组 合成 一 个 组 件 ,并 且 测 试 它们 之 间 的 接口 。 从 这 一 层 意义 上 讲 ,组 
件 是 指 多 个 单元 的 集成 聚合 。 在 现实 方案 中 ,许多 单元 组 合成 组 件 , 而 这 些 组 件 又 聚合 成 程 
序 的 更 大 部 分 。 方 法 是 测试 片段 的 组 合 , 并 最 终 扩展 进程 ,将 用 户 的 模块 与 其 他 组 的 模块 一 
起 测试 。 最 后 ,将 构成 进程 的 所 有 模块 一 起 测试 。 此 外 ,如 果 程 序 由 多 个 进程 组 成 ,应 该 成 
对 测试 它们 ,而 不 是 同时 测试 所 有 进程 。 
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集成 测试 识别 组 合 单元 时 出 现 的 问题 。 通 过 使 用 要 求 在 组 合 单元 前 测试 每 个 单元 并 确 
保 每 个 单元 的 生存 能 力 的 测试 计划 ,可 以 知道 在 组 合 单元 时 所 发 现 的 任何 错误 很 可 能 与 单 
元 之 间 的 接口 有 关 。 这 种 方法 将 可 能 发 生 的 情况 数量 减少 到 更 简单 的 分 析 级 别 。 

集成 测试 是 在 单元 测试 的 基础 上 ,测试 在 将 所 有 的 软件 单元 按照 概要 设计 规格 说 明 的 
要 求 组 装 成 模块 . 子 系统 或 系统 的 过 程 中 各 部 分 工作 是 否 达 到 或 实现 相应 技术 指标 及 要 求 
的 活动 。 也 就 是 说 ,在 集成 测试 之 前 ,单元 测试 应 该 已 经 完成 ,集成 测试 中 所 使 用 的 对 象 应 
该 是 已 经 经 过 单元 测试 的 软件 单元 。 这 一 点 很 重要 ,因为 如 果 不 经 过 单元 测试 ,那么 集成 测 
试 的 效果 将 会 受到 很 大 影响 ,并 且 会 大 幅 增加 软件 单元 代码 纠 错 的 代价 。 

集成 测试 是 单元 测试 的 逻辑 扩展 。 在 现实 方案 中 ,集成 是 指 多 个 单元 的 聚合 ,许多 单元 
组 合成 模块 ,而 这 些 模 块 又 聚合 成 程序 的 更 大 部 分 ,如 分 系统 或 系统 。 集 成 测试 采用 的 方法 
是 测试 软件 单元 的 组 合 能 否 正常 工作 ,以 及 与 其 他 组 的 模块 能 否 集成 起 来 工作 。 最 后 ,还 要 
测试 构成 系统 的 所 有 模块 组 合 能 否 正常 工作 。 

所 有 的 软件 项 目 都 不 能 摆脱 系统 集成 这 个 阶段 。 不 管 采用 什么 开发 模式 ,具体 的 开发 
工作 总 要 从 一 个 一 个 的 软件 单元 做 起 ,软件 单元 只 有 经 过 集成 才能 形成 一 个 有 机 的 整体 。 
具体 的 集成 过 程 可 能 是 显 性 的 也 可 能 是 隐 性 的 。 只 要 有 集成 ,总 是 会 出 现 一 些 常见 问题 , 工 
程 实践 中 ,几乎 不 存在 软件 单元 组 装 过 程 中 不 出 任何 问题 的 情况 。 

集成 测试 的 必要 性 还 在 于 一 些 模 块 虽然 能 够 单独 地 工作 ,但 并 不 能 保证 连接 起 来 也 能 
正常 工作 。 程 序 在 某 些 局 部 反映 不 出 来 的 问题 ,有 可 能 在 全 局 上 会 暴露 出 来 ,影响 功能 的 实 
现 。 此 外 ,在 某 些 开发 模式 中 ,如 迭代 式 开发 ,设计 和 实现 是 迭代 进行 的 。 在 这 种 情况 下 , 集 
成 测试 的 意义 还 在 于 它 能 间接 地 验证 概要 设计 是 否 具 有 可 行 性 。 

集成 测试 的 目的 是 确保 各 单元 组 合 在 一 起 后 能 够 按 既 定 意图 协作 运行 ,并 确保 增 量 的 
行为 正确 。 它 所 测试 的 内 容 包括 单元 间 的 接口 以 及 集成 后 的 功能 。 使 用 黑 盒 测试 方法 测试 
集成 的 功能 ,并 且 对 以 前 的 集成 进行 回归 测试 。 

1. 集成 测试 过 程 

1) 软件 测试 过 程 图 解 

软件 测试 过 程 如 图 3-18 所 示 。 
集成 测试 计划 

设计 集成 测试 | 


实施 集成 测试 
执行 集成 测试 


评估 集成 测试 


图 3-18 软件 测试 过 程 


2) 集成 测试 需求 获取 

集成 测试 需求 所 确定 的 是 对 某 一 集成 工作 版 本 的 测试 的 内 容 , 即 测试 的 具体 对 象 。 集 
成 测试 需求 主要 来 源 于 设计 模型 (Design Model) 和 集成 构件 计划 (Integration Build Plan). 
集成 测试 着 重 于 集成 版 本 的 外 部 接口 的 行为 。 因 此 ,测试 需求 需 具 有 可 观测 、 可 测评 性 。 

CD. 集成 工作 版 本 应 分 析 其 类 协作 与 消息 队列 ,从 而 找 出 该 工作 版 本 的 外 部 接口 。 
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(2) 由 集成 工作 版 本 的 外 部 接口 确定 集成 测试 用 例 。 

(3) 测试 用 例 应 覆盖 工作 版 本 每 一 外 部 接口 的 所 有 消息 流 序列 。 

注意 : 一 个 外 部 接口 和 测试 用 例 的 关系 是 多 对 多 ,部 分 集成 工作 版 本 的 测试 需求 可 映 
射 到 系统 测试 需求 ,因此 对 这 些 集成 测试 用 例 可 采用 重用 系统 测试 用 例 技 术 。 

3) 集成 测试 工作 机 制 

软件 集成 测试 工作 需要 产品 评测 部 担任 ,需要 项 目 组 相关 角色 配合 完成 。 具 体 角 色 和 
职责 如 表 3-12 和 表 3-13 所 示 。 


表 3-12 评测 部 的 角色 和 职责 


角色 职 责 
测试 设计 员 负责 制定 集成 测试 计划 ,设计 集成 测试 .实施 集 成 测试 评估 集成 测试 
测试 员 执行 集成 测试 ,记录 测试 结果 


表 3-13 软件 项 目 组 的 角色 和 职责 


角色 职 责 
实施 员 负责 实施 类 (包括 驱动 程序 和 桩 ) ,并 对 其 进行 单元 测试 。 根 据 集成 测试 发 现 的 缺陷 提出 
变更 申请 
配置 管理 员 ”负责 对 测试 工件 进行 配置 管理 
集成 员 负责 制定 集成 构建 计划 ,按照 集成 计划 将 通过 了 单元 测试 的 类 集成 
设计 员 负责 设计 测试 驱动 程序 和 桩 。 根 据 集成 测试 发 现 的 缺陷 提出 变更 申请 


集成 测试 工作 内 容 及 其 工作 流程 如 图 3-19 所 示 。 


设计 员 : 开发 设计 模型 


1 
集成 员 : 指定 集成 计划 


1 
实施 员 : 实施 类 ， 进 行 单元 测试 


1 
测试 设计 员 : 制定 集成 测试 计划 ， 设 计 集 成 测试 用 例 、 测 试 过 程 、 测 试 脚本 


1 
NR: VETRINA ge e [设计 员 & 集 成 员 :提出 变更 请 求 


Y 
测试 设计 员 : 评估 集成 测试 ， 生 成 


评估 摘要 dx 


图 3-19 集成 测试 工作 流程 
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4) 集成 测试 产生 的 工作 清单 
CO 软件 集成 测试 计划 。 

(2) 集成 测试 用 例 。 

(3) 测试 过 程 。 

(4) 测试 脚本 。 

(5) 测试 日 志 。 

(6) 测试 评估 摘要 。 


2. 集成 测试 常用 方案 选 型 


集成 测试 的 实施 方案 有 很 多 种 ,如 自 底 向 上 集成 测试 、 自 项 向 下 集成 测试 、Big-Bang 集 
成 测试 .三 明治 集成 测试 ,核心 集成 测试 .分 层 集成 测试 .基于 使 用 的 集成 测试 等 。 下 面 是 实 
践 中 证 实 有 效 的 集成 测试 方案 。 

1) 自 底 向 上 集成 测试 

自 底 向 上 的 集成 (Bottom-Up Integration) 方 式 是 最 常 使 用 的 方法 。 其 他 集成 方法 都 或 
多 或 少 地 继承 、 吸 收 了 这 种 集成 方式 的 思想 。 自 底 向 上 集成 方式 从 程序 模块 结构 中 最 底层 
的 模块 开始 组 装 和 测试 。 因 为 模块 是 自 底 向 上 进行 组 装 的 ,对 于 一 个 给 定 层次 的 模块 , 它 的 
子 模块 (包括 子 模块 的 所 有 下 属 模 块 ) 事 先 已 经 完成 组 装 并 经 过 测试 ,所 以 不 再 需要 编制 桩 
模块 (一 种 能 模拟 真实 模块 ,给 待 测 模块 提供 调用 接口 或 数据 的 测试 用 软件 模块 )。 自 底 向 
上 集成 测试 的 步骤 大 致 如 下 。 

步骤 一 : 按照 概要 设计 规格 说 明 , 明 确 有 哪些 被 测 模块 。 在 熟悉 被 测 模块 性 质 的 基础 
上 对 被 测 模块 进行 分 层 ,在 同一 层次 上 的 测试 可 以 并 行进 行 ,然后 排出 测试 活动 的 先后 关 
系 , 制 定 测试 进度 计划 。 图 3-20 给 出 了 自 底 向 上 的 集成 测试 过 程 中 各 测试 活动 的 拓扑 关 
系 。 利 用 图 论 的 相关 知识 ,可 以 排出 各 活动 之 间 的 时 间 序 列 关系 ,处 于 同一 层次 的 测试 活动 
可 以 同时 进行 ,而 不 会 相互 影响 。 


图 3-20 ”测试 方案 选 型 


89 


MA 


90 


N 


实用 软件 测试 


步骤 二 : 在 步骤 一 的 基础 上 ,按时 间 线 序 关 系 ,将 软件 单元 集成 为 模块 ,并 测试 在 集成 
过 程 中 出 现 的 问题 。 这 里 ,可 能 需要 测试 人 员 开发 一 些 驱动 模块 来 驱动 集成 活动 中 形成 的 
被 测 模块 。 对 于 比较 大 的 模块 ,可 以 先 将 其 中 的 某 几 个 软件 单元 集成 为 子 模块 ,然后 再 集成 
为 一 个 较 大 的 模块 。 

步骤 三 : 将 各 软件 模块 集成 为 子 系统 (或 分 系统 )。 检 测 各 自 子 系统 是 否 能 正常 工作 。 
同样 ,可 能 需要 测试 人 员 开 发 少量 的 驱动 模块 来 驱动 被 测 子 系统 。 

步骤 四 : 将 各 子 系统 集成 为 最 终 用 户 系统 ,测试 是 否 存在 各 分 系统 能 否 在 最 终 用 户 系 
统 中 正常 工作 。 

方案 点 评 : 自 底 向 上 的 集成 测试 方案 是 工程 实践 中 最 常用 的 测试 方法 。 相 关 技 术 也 较 
为 成 熟 。 它 的 优点 很 明显 : 管理 方便 ,测试 人 员 能 较 好 地 锁定 软件 故障 所 在 位 置 。 但 它 对 
于 某 些 开发 模式 不 适用 ,如 使 用 XP 开发 方法 , 它 会 要 求 测试 人 员 在 全 部 软件 单元 实现 之 前 
完成 核心 软件 部 件 的 集成 测试 。 尽 管 如 此 , 自 底 向 上 的 集成 测试 方法 仍 不 失 为 一 个 可 供 参 
考 的 集成 测试 方案 。 

2) 核心 系统 先行 集成 测试 

核心 系统 先行 集成 测试 法 的 思想 是 先 对 核心 软件 部 件 进 行 集成 测试 ,在 测试 通过 的 基 
础 上 再 按 各 外 围 软件 部 件 的 重要 程度 逐个 集成 到 核心 系统 中 。 每 次 加 入 一 个 外 围 软件 部 件 
都 产生 一 个 产品 基线 ,直至 最 后 形成 稳定 的 软件 产品 。 核 心 系 统 先行 集成 测试 法 对 应 的 集 
成 过 程 是 一 个 逐渐 趋 于 闭合 的 螺旋 形 曲线 ,代表 产品 逐步 定型 的 过 程 。 其 步骤 如 下 。 

步骤 一 : 对 核心 系统 中 的 每 个 模块 进行 单独 的 、 充 分 的 测试 ,必要 时 使 用 驱动 模块 和 桩 
模块 。 

步骤 二 : 对 于 核心 系统 中 的 所 有 模块 一 次 性 集合 到 被 测 系统 中 ,解决 集成 中 出 现 的 各 
类 问题 。 在 核心 系统 规模 相对 较 大 的 情况 下 ,也 可 以 按照 自 底 向 上 的 步骤 ,集成 核心 系统 的 
各 组 成 模块 。 

步骤 三 : 按照 各 外 围 软件 部 件 的 重要 程度 以 及 模块 间 的 相互 制约 关系 ,拟定 外 围 软 件 
部 件 集成 到 核心 系统 中 的 顺序 方案 。 方 案 经 评审 以 后 , 即 可 进行 外 围 软件 部 件 的 集成 。 

步骤 四 : 在 外 围 软件 部 件 添加 到 核心 系统 以 前 ,外 围 软件 部 件 应 先 完 成 内 部 的 模块 级 
集成 测试 。 

步骤 五 : 按 顺 序 不 断 加 入 外 围 软件 部 件 ,排除 外 围 软 件 部 件 集成 中 出 现 的 问题 ,形成 最 
终 的 用 户 系统 。 

方案 点 评 : 该 集成 测试 方法 对 于 快速 软件 开发 很 有 效果 ,适合 较 复杂 系统 的 集成 测试 ， 
能 保证 一 些 重要 的 功能 和 服务 的 实现 。 缺 点 是 采用 此 法 的 系统 一 般 应 能 明确 区 分 核心 软件 
部 件 和 外 围 软件 部 件 , 核 心软 件 部 件 应 具有 和 较 高 的 契合 度 ,外 围 软件 部 件 内 部 也 应 具有 和 较 高 
的 耦合 度 ,但 各 外 围 软件 部 件 之 间 应 具有 较 低 的 耦合 度 。 

3) 高 频 集 成 测试 

高 频 集 成 测试 是 指 同步 于 软件 开发 过 程 ,每 隔 一 段 时 间 对 开发 团队 的 现 有 代码 进行 一 
次 集成 测试 。 如 某 些 自动 化 集成 测试 工具 能 实现 每 日 深夜 对 开发 团队 的 现 有 代码 进行 一 次 
集成 测试 ,然后 将 测试 结果 发 到 各 开发 人 员 的 电子 邮箱 中 。 该 集成 测试 方法 频繁 地 将 新 代 
码 加 入 到 一 个 已 经 稳定 的 基线 中 ,以 免 集 成 故障 难以 发 现 ,同时 控制 可 能 出 现 的 基线 偏差 。 
使 用 高 频 集成 测试 需要 具备 一 定 的 条 件 : 可 以 持续 获得 一 个 稳定 的 增 量 ,并 且 该 增 量 内 部 
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已 被 验证 没有 问题 大 部 分 有 意义 的 功能 增加 可 以 在 一 个 相对 稳定 的 时 间 间 隔 ( 如 每 个 工 
作 日 ) 内 获得 ; 测试 包 和 代码 的 开发 工作 必须 是 并 行进 行 的 ,并 且 需 要 版 本 控制 工具 来 保证 
始终 维护 的 是 测试 脚本 和 代码 的 最 新 版 本 ; 必须 借助 于 使 用 自动 化 工具 来 完成 。 高 频 集成 
一 个 显著 的 特点 就 是 集成 次 数 频 繁 , 显 然 , 人 工 的 方法 是 不 胜任 的 。 

高 频 集 成 测试 一 般 采 用 如 下 步骤 来 完成 。 

步骤 一 : 选择 集成 测试 自动 化 工具 。 如 很 多 Java 项 目 采 用 JUnit 十 Ant 方案 来 实现 集 
成 测试 的 自动 化 ,也 有 一 些 商 业 集成 测试 工具 可 供 选择 。 

步骤 二 : 设置 版 本 控制 工具 ,以 确保 集成 测试 自动 化 工具 所 获得 的 版 本 是 最 新 版 本 。 
如 使 用 CVS 进行 版 本 控制 。 

步骤 三 : 测试 人 员 和 开发 人 员 负 责编 写 对 应 程序 代码 的 测试 脚本 。 

步骤 四 : 设置 自动 化 集成 测试 工具 ,每 隔 一 段 时 间 对 配置 管理 库 的 新 添加 的 代码 进行 
自动 化 的 集成 测试 ,并 将 测试 报告 汇报 给 开发 人 员 和 测试 人 员 。 

步骤 五 : 测试 人 员 监 督 代码 开发 人 员 及 时 关闭 不 合格 项 。 

按照 步骤 三 至 步骤 五 不 断 循 环 , 直 至 形成 最 终 软 件 产品 。 

方案 点 评 : 该 测试 方案 能 在 开发 过 程 中 及 时 发 现代 码 错 误 , 能 直观 地 看 到 开发 团队 的 
有 效 工 程 进度 。 在 此 方案 中 ,开发 维护 源 代码 与 开发 维护 软件 测试 包 被 赋予 了 同等 的 重要 
性 ,这 对 有 效 防止 错误 、 及 时 纠正 错误 都 很 有 帮助 。 该 方案 的 缺点 在 于 测试 包 有 时 候 可 能 不 
能 暴露 深层 次 的 编码 错误 和 图 形 界面 错误 。 

以 上 介绍 了 儿 种 常见 的 集成 测试 方案 ,一 般 来 讲 , 在 现代 复杂 软件 项 目 集成 测试 过 程 
中 ,通常 采用 核心 系统 先行 集成 测试 和 高 频 集 成 测试 相 结合 的 方式 进行 , 自 底 向 上 的 集成 测 
试 方案 在 采用 传统 瀑布 式 开发 模式 的 软件 项 目 集 成 过 程 中 较为 常见 。 实 践 中 应 该 结合 项 目 
的 实际 工程 环境 及 各 测试 方案 适用 的 范围 进行 合理 的 选 型 。 


6.5 系统 测试 


系统 测试 是 将 已 经 确认 的 软件 计算 机 硬件 、 外 设 、 网 络 等 其 他 元 素 结合 在 一 起 ,进行 信 
息 系统 的 各 种 组 装 测试 和 确认 测试 ,系统 测试 是 针对 整个 产品 系统 进行 的 测试 ,目的 是 验证 
系统 是 否 满足 了 需求 规格 的 定义 , 找 出 与 需求 规格 不 符 或 与 之 矛盾 的 地 方 ,从 而 提出 更 加 完 
善 的 方案 。 系 统 测试 发 现 问 题 之 后 要 经 过 调试 找 出 错误 原因 和 位 置 ,然后 进行 改正 。 基 于 
系统 整体 需求 说 明 书 的 黑 盒 类 测试 ,应 覆盖 系统 所 有 联合 的 部 件 。 对 象 不 仅 包 括 需 测试 的 
软件 ,还 要 包含 软件 所 依赖 的 硬件 、 外 设 甚 至 包括 某 些 数据 、 某 些 支 持 软 件 及 其 接口 等 。 


1. 非 功能 性 测试 


1) 安全 性 测试 

软件 安全 性 轻 则 造成 操作 的 不 方便 , 重 则 造成 数据 的 破坏 或 丢失 甚至 系统 的 崩溃 和 人 
身 的 安全 ,因此 ,软件 安全 性 是 一 个 不 容 忽视 的 重要 问题 。 我 们 可 以 简单 地 把 软件 的 安全 性 
作为 一 个 或 多 个 特定 的 功能 来 考虑 ,从 而 在 软件 生命 周期 的 早期 就 加 以 考虑 。 

为 了 帮助 设计 一 个 安全 的 信息 系统 ,在 产品 设计 的 最 开始 就 必须 注意 安全 的 问题 ,例如 需 
求 中 应 有 安全 性 的 相关 项 目 、 设 计 和 代码 评审 应 有 专门 针对 安全 性 的 内 容 等 ,然后 才 是 测试 。 
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测试 员 仅 能 测试 验证 软件 的 安全 性 。 当 然 , 对 于 没有 在 软件 需求 书 上 标明 的 可 能 影响 系统 运行 
安全 的 隐 性 需求 测试 人 员 也 要 努力 地 发 现 , 这 也 是 一 个 有 经 验 的 安全 性 测试 人 员 的 可 贵 之 处 。 
当然 ,理论 上 没有 任何 一 个 信息 系统 是 安全 的 ,因为 只 要 进行 攻击 ,任何 系统 都 能 被 攻 
破 , 只 不 过 付出 的 代价 的 大 小 不 同 。 而 一 般 说 某 个 信息 系统 是 安全 的 就 是 基于 如 果 要 攻破 
该 系统 所 必须 付出 的 代价 要 高 于 或 远 远 高 于 攻破 系统 后 获得 的 利益 。 
软件 安全 性 测试 策略 如 表 3-14 所 示 。 


表 3-14 软件 安全 性 测试 策略 


测试 目标 测试 应 用 或 系统 的 安全 机 制 ,保证 系统 运行 和 使 用 的 安全 性 

采取 静态 分 析 技 术 和 功能 测试 两 种 方式 拦截 系统 开发 时 存在 的 漏洞 
测试 策略 软件 生命 周期 早期 的 代码 ,设计 评审 (由 开发 人 员 完 成 ) 对 软件 安全 性 的 提高 非常 有 效 和 
重要 ,可 以 人 工 评审 和 自动 化 工具 结合 的 方法 进行 

相关 信息 安全 法 律 法 规 的 要 求 

测试 环境 

网 络 安全 

日 志 评 审 

文件 完整 性 检查 

系统 软件 安全 

客户 端 应 用 安全 

客户 端 到 服务 端 应 用 通信 安全 

。 服务 端 应 用 安全 


测试 重点 考虑 


测试 通过 准则 | 应 用 满足 和 符合 采用 的 安全 机 制 ,在 应 用 规定 的 程度 上 能 保证 系统 正常 运行 和 安全 使 用 


软件 安全 性 测试 包括 应 用 软件 、 网 络 系统 、 数 据 库 和 系统 软件 安全 性 测试 。 根 据 系统 安 
全 指标 不 同 测试 策略 也 不 同 。 

CD 用 户 认证 安全 的 测试 要 考虑 问题 : 

(D 系统 中 是 否 有 不 同 的 用 户 使 用 权限 ; 

© 系统 会 不 会 因 用 户 的 权限 的 改变 造成 混乱 ; 

@ 系统 中 会 不 会 出 现 用 户 冲 突 ; 

@ 用 户 登录 密码 是 否 可 见 、 可 复制 ; 

© 是 否 可 以 通过 绝对 路 径 登录 系统 (复制 用 户 登录 后 的 链接 直接 进入 系统 ); 

© 用 户 退出 系统 后 是 否 删除 了 所 有 鉴 权 标记 .是否 可 以 使 用 后 退 键 而 不 通 

过 输入 口令 进入 系统 。 

(2) 应 用 方面 安全 的 测试 要 考虑 问题 : 

(D 缓冲 区 溢出 ; 

© 无 效 的 数据 类 型 

@ 关键 信息 是 否 采用 加 密 技 术 ; 

CD 是 否 可 以 通过 绝对 路 径 进入 系统 ; 

C) 使 用 的 端口 号 ; 

© 远程 进入 服务 (如 有 ); 

D 文件 完整 性 检查 ; 
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® 日 志 评审 ; 

@ 模拟 黑客 攻击 。 

(3) 系统 网 络 安全 的 测试 要 考虑 问题 : 

(D 物理 连接 上 的 安全 ,包括 无 线 部 分 (如 果 有 ); 

© 防火 墙 防 病毒 软件 的 安全 ; 

© 测试 采取 的 防护 措施 是 否 正 确 装配 好 ,有 关系 统 的 补丁 是 否 打 上 ; 

© 模拟 非 授 权 攻 击 , 看 防护 系统 是 否 坚 固 ; 

C) 采用 成 熟 的 网 络 漏洞 检查 工具 检查 系统 相关 漏洞 ; 

入 侵 网 络 监察 系统 和 防护 系统 ; 

@ 采用 各 种 木马 检查 工具 检查 系统 木马 情况 ; 

@ 采用 各 种 防 外 挂 工具 检查 系统 各 组 程序 的 外 挂 漏洞 。 

OD 数据 库 安全 考虑 问题 : 

(D 系统 数据 是 否 机 密 ; 

@ 系统 数据 的 完整 性 ; 

@ 系统 数据 可 管理 性 ; 

@ 系统 数据 的 独立 性 ; 

© 系统 数据 可 备份 和 恢复 能 力 ( 数 据 备份 是 否 完整 ,可 否 恢 复 , 恢 复 是 否 完整 )。 

(5) 系统 级 别 软件 安全 考虑 问题 : 

CD 系统 级 别 软 件 (如 操作 系统 、 数 据 库 系统 和 中 间 件 系统 等 ) 是 否 是 最 新 的 ,尤其 如 果 
使 用 开源 软件 或 免费 软件 ; 

© 系统 软件 是 否 有 相应 的 补丁 ,尤其 是 安全 性 方面 的 补丁 包 ; 

O 从 安全 性 考虑 ,系统 级 别 软件 是 否 是 最 可 靠 的 (如 使 用 Tomcat 还 是 WebLogic); 

@ 从 安全 性 考虑 ,系统 级 别 软件 是 否 匹 配 应 用 设计 技术 。 

2) 安装 测试 

安装 测试 有 两 个 目的 。 第 一 个 目的 是 确保 软件 能 够 在 不 同 的 条 件 下 进行 安装 ,例如 , 首 
次 安装 、 升 级 安装 、 完 整 或 自 定义 安装 ; 在 正常 和 异常 条 件 下 的 安装 。 异 常 条 件 例如 磁盘 空 
间 不 足 、 安 装 用 户 缺少 目录 创建 权限 等 。 第 二 个 目的 是 验证 软件 在 安装 后 能 正确 操作 。 这 
通常 意味 着 要 运行 大 量 为 功能 测试 开发 的 测试 用 例 。 

建议 对 于 安装 测试 ,其 重点 应 该 放 在 第 一 个 目的 上 ,对 于 第 二 个 目的 可 以 根据 需要 和 实 
际 情况 穿插 在 后 续 的 测试 ,如 冒 烟 测试 .功能 测试 中 体现 。 

软件 安装 测试 策略 如 表 3-15 所 示 。 


表 3-15 软件 安装 测试 策略 


验证 被 测 软 件 在 各 种 需要 的 软 硬 件 配 置 下 正确 安装 ,包括 下 列 情况 : 
。 新 安装 。 新 的 机 器 ,之 前 从 未 安装 过 该 软件 


MARI 。 更新。 该 机 器 之 前 安装 过 该 软件 同样 的 版 本 
。 更 新 。 该 机 器 之 前 安装 过 该 软件 的 老 版 本 
手工 或 自动 化 
测试 策略 — 不 管 是 手工 安装 还 是 自动 化 脚本 安装 ,都 要 严格 按照 用 户 安装 手册 规定 的 操作 步骤 


进行 
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S 
有 没有 安装 手册 
indies 对 于 第 二 个 目的 的 安装 测试 ,怎样 选取 预先 规定 的 功能 测试 的 子 集 
对 于 第 一 个 目的 : 确保 软件 能 够 在 不 同 的 条 件 下 进行 安装 。 成 功 的 安装 应 该 是 在 整个 
测试 通过 准则 安装 过 程 中 和 安装 完成 后 没有 任何 异常 错误 出 现 , 能 成 功 登录 该 应 用 


对 于 第 二 个 目的 : 验证 软件 在 安装 后 能 正确 操作 。 这 个 需要 运行 预先 规定 的 一 功能 测 
试 的 子 集 


3) 配置 和 兼容 性 测试 

配置 和 兼容 性 测试 验证 被 测 软件 在 不 同 的 软 硬 件 配置 下 的 操作 和 表现 。 

在 大 多 数 生产 环境 中 ,特定 的 硬件 规格 ,如 客户 端 工 作 站 、 网 络 情况 .服务 器 配置 甚至 型 号 都 
会 不 同 。 另 外 ,不 同 客户 端 工作 站 上 也 许 有 不 同 的 软件 负载 ,如 不 同 的 应 用 软件 .不同 的 浏览 器 、 
浏览 器 的 不 同 版 本 的 插件 .驱动 程序 等 ; 甚至 不 同 的 操作 系统 ,如 Windows XP. Windows Vista 
等 ; 服务 器 软件 也 会 不 一 致 ,如 数据 库 软 件 , 如 Oracle. Microsoft SQL Server、 中 间 件 软件 等 。 

该 类 测试 对 产品 显得 尤其 重要 ,对 于 项 目 来 说 也 有 巨大 的 指导 作用 ,如 项 目 经 理 为 了 最 
优化 配置 (从 成 本 和 实用 的 角度 等 ), 就 需要 进行 不 同 软 硬 件 情 况 下 的 配置 和 兼容 性 测试 。 
该 类 测试 也 往往 和 性 能 测试 相 结合 以 决定 在 不 同 软 硬 件 情况 下 的 最 优化 配置 (如 从 成 本 和 
实用 的 角度 等 ) 。 

软件 配置 和 羔 容 性 测试 策略 如 表 3-16 所 示 。 

表 3-16 软件 配置 和 兼容 性 测试 策略 


测试 目标 验证 被 测 软件 在 各 种 需要 的 软 硬 件 配置 下 能 正确 运行 

使 用 功能 测试 脚本 。 首 先 ,针对 特定 硬件 配置 下 : 

* 打开 和 关闭 许多 和 被 测 软件 无 关 的 \ 但 和 被 测 软 件 共同 在 同一 机 器 上 的 其 他 许多 软 

测试 策略 件 ,如 同 机 上 的 Microsoft 应 用 软件 ,Excel 或 Word 等 (如 果 有 ) ,可 以 在 测试 过 程 中 和 
测试 前 就 打开 

° 在 此 基础 上 执行 相应 的 功能 测试 

硬件 配置 情况 复杂 多 样 ,使 用 哪些 硬件 配置 呢 ? 建议 最 好 做 些 调研 ,如 考虑 目标 用 户 或 

最 终 用 户 的 使 用 习惯 和 经 济 承受 能 力 

测试 重点 考虑 | 打开 哪些 和 被 测 软件 无 关 的 \ 但 和 被 测 软件 共同 在 同一 机 器 上 的 其 他 许多 软件 ? 建议 最 

好 做 些 调研 ,如 考虑 目标 用 户 或 最 终 用 户 会 使 用 哪些 其 他 的 常用 软件 ? 尤其 在 使 用 目标 

软件 时 往往 同时 会 打开 或 使 用 的 软件 

在 某 一 特定 的 硬件 配置 下 ,在 许多 和 被 测 软件 无 关 的 \ 但 和 被 测 软件 共同 在 同一 机 器 上 

的 其 他 许多 软件 运行 或 使 用 情况 下 ,相应 的 功能 测试 没有 失败 


测试 通过 准则 


4) 易 用 性 测试 

易 用 性 是 人 类 工程 学 的 目标 。 软 件 的 易 用 性 是 一 个 比较 有 特点 的 问题 ,会 随 着 具体 产 
品 或 项 目的 特征 和 要 求 而 有 巨大 差异 ,例如 ,手机 软件 和 一 般 Windows 平台 下 的 软件 易 用 
性 相差 很 大 ,又 如 一 核反应 堆 的 关闭 序列 和 一 语音 信箱 的 菜单 系统 的 易 用 性 有 着 天 壤 之 别 。 
即使 对 于 同一 个 软件 ,不 同 的 用 户 也 会 有 不 同 的 感受 。 当 然 , 也 不 是 说 对 软件 的 易 用 性 就 毫 
无 测试 办 法 和 标准 ,对 于 同一 类 软件 还 是 有 它 的 通用 性 可 言 的 。 因 此 下 面 尝 试 从 一 些 比较 
通用 的 方面 讨论 它 。 
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易 用 性 主要 考虑 软件 使 用 时 人 的 因素 和 感受 ,因此 先 介绍 两 个 概念 。 用 户 与 程序 相互 
交互 的 介质 称 为 用 户 接口 (User Interface, UD ,用 户 接口 对 不 同 软件 种 类 也 会 有 巨大 的 差 
异 , 对 于 PC 来 说 ,现在 有 了 精致 的 完善 的 图 形 用 户 接口 (Graphical User Interface, GUI), 
很 快 人 们 就 可 以 对 着 PC 听 和 说 , 那 时 又 会 有 新 的 UT. 

另外 ,Accessibility Testing 也 属于 易 用 性 测试 范畴 。 这 种 测试 一 般 针 对 对 软件 有 特殊 
要 求 的 群体 ,例如 部 分 残疾 人 。 

软件 易 用 性 测试 策略 如 表 3-17 所 示 。 


表 3-17 软件 易 用 性 测试 策略 


测试 目标 考虑 软件 使 用 时 人 的 因素 和 感受 

使 用 功能 测试 脚本 

对 于 一 些 比较 通用 的 规则 可 以 做 成 检查 表 的 形式 

* 遵守 通用 的 标准 和 指导 方针 。 如 Windows 平台 下 的 软件 应 和 Windows 平台 的 风格 
一 致 ,而 Mac 平 台 下 的 软件 显然 应 该 和 Mac 平台 的 风格 一 致 

° 直觉 的 。 如 用 户 界面 是 干净 的 ,不 多 余 的 ,用 户 界 面 是 经 过 良好 组 织 和 布局 的 

° 一 致 性 。 如 快捷 键 和 菜单 选项 间 ; 术语 和 命名 ;“ 确 认 ” 和 “取消 "按钮 的 位 置 布局 等 

* 灵活 性 。 如 用 户 希望 能 手工 输入 粘贴 .插入 文件 内 容 等 方式 作为 输入 方法 

* 舒服 的 。 如 较 长 时 间 的 等 待 应 有 进度 条 提示 ,一 般 情 况 下 程序 应 有 较 快 的 反应 。 但 

也 不 是 绝对 的 , 举 个 例子 ,高 性 能 就 一 定好 吗 ? 未 必 如 此 ,例如 当 快 速 到 连 提示 信息 

或 出 错 信 息 都 不 能 看 清 时 用 户 反而 会 觉得 很 不 舒服 

正确 的 。 例 如 拼写 ; 图 标 是 否 有 同样 的 大 小 和 背景 ; 还 有 是 否 所 见 即 所 得 (What You 

See Is What You Get, WYSIWYG) 

有 用 的 。 没 有 大 量 的 过 量 功能 ,这 个 特征 尤其 在 产品 上 表现 突出 ,用 户 往往 要 面 对 大 

量 的 无 用 的 或 者 不 需要 的 功能 

该 类 测试 对 于 不 同 产品 和 项 目 有 较 大 的 差异 性 ,因此 尤其 要 加 强 对 该 类 测试 用 例 的 评 

测试 通过 准则 | 审 , 在 业务 人 员 、 设 计 人 员 等 一 致 同意 的 基础 上 进行 测试 ,测试 人 员 也 要 关注 软件 需求 中 

应 有 该 方面 的 相关 描述 


测试 策略 


测试 重点 考虑 


5) 数据 和 数据 库 完整 性 测试 

在 整个 系统 测试 过 程 中 ,数据 库 和 数据 库 过 程 应 作为 系统 的 子 系统 进行 测试 。 这 些 测 
试 不 使 用 用 户 界 面 作 为 数据 进入 界面 进行 测试 。 对 不 同 的 数据 库 管 理 系统 ,可 能 存在 不 同 
的 工具 和 技术 ,如 Oracle 和 Microsoft SQL Server。 

软件 数据 和 数据 库 完整 性 测试 策略 如 表 3-18 所 示 。 


表 3-18 软件 数据 和 数据 库 完整 性 测试 策略 


测试 目标 保证 数据 存 取 方法 和 过 程 正确 运行 ,在 整个 数据 操作 过 程 中 和 结束 后 没有 数据 破坏 
使 用 有 效 的 和 无 效 的 数据 或 数据 的 请 求 调用 各 个 数据 库存 取 方 法 和 过 程 

测试 策略 检查 数据 库 保证 数据 正如 预期 地 进入 ,所 有 的 数据 库 事件 正确 地 发 生 , 或 者 检查 数据 保 
证 对 于 正确 的 请 求 取得 正确 的 数据 

测试 也 许 需 要 一 个 DBMS 开发 环境 或 驱动 程序 以 便 在 数据 库 中 直接 进入 或 更 改 数 据 
测试 重点 考虑 | 确定 哪些 数据 存 取 方 法 和 数据 过 程 重点 测试 

测试 的 先后 顺序 

测试 通过 准则 | 所 有 的 数据 库存 取 方 法 和 过 程 正如 设计 要 求 一 样 运 行 ,没有 任何 的 数据 破坏 
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6) 接口 测试 

在 集成 测试 过 程 中 ,接口 测试 显得 特别 重要 ,首先 要 确认 被 测 软件 是 否 集成 了 规定 的 单 
元 或 子 系统 、 外 部 系统 (如 果 有 ); 其 次 ,对 相应 的 接口 要 进行 详细 的 测试 ; 最 后 也 应 该 对 集 
成 后 的 所 有 功能 进行 相应 的 测试 以 确保 集成 后 整个 系统 功能 的 正确 性 。 

软件 接口 测试 策略 如 表 3-19 所 示 。 


表 3-19 软件 接口 测试 策略 


确保 “测试 需求 "中 对 应 的 所 有 工作 版 本 的 内 部 单元 组 合 到 一 起 后 能 够 按照 设计 的 意图 
协作 运行 ,接口 的 调用 正确 

使 用 功能 测试 脚本 

测试 策略 按照 设计 规范 ,对 所 有 接口 设计 相应 的 测试 用 例 进 行 手工 或 自动 化 测试 ,包括 系统 内 部 
接口 和 外 部 接口 ,尤其 注意 和 第 三 方 的 软 硬 件 接口 (如 果 有 ) 

测试 的 顺序 性 

数据 是 否 能 正确 传递 

测试 重点 考虑 | 接口 之 间 的 调用 

状态 的 变化 是 否 正确 (如 果 有 ) 

接口 之 间 的 异常 处 理 功能 

测试 通过 准则 | 所 有 与 接口 有 关 的 测试 用 例 功能 没有 失败 


测试 目标 


7) 文档 测试 

文档 也 是 发 布 的 软件 产品 的 重要 组 成 部 分 ,因此 也 应 该 对 文档 进行 相应 的 测试 ,尤其 对 
安装 手册 (前 面 已 有 所 述 ) ,用户 使 用 手册 和 在 线 帮助 手册 要 进行 重点 测试 。 正 确 的 文档 能 
减少 维护 费用 和 提高 软件 的 可 维护 性 改善 软件 易 用 性 、 减 少 责任 等 。 

软件 文档 测试 策略 如 表 3-20 所 示 。 

表 3-20 软件 文档 测试 策略 

测试 目标 保证 发 布 的 软件 产品 中 的 文档 的 正确 性 
按照 手册 描述 , 逐 章节 阅读 ,检查 和 验证 相应 的 内 容 , 例 如 ,严格 地 按照 用 户 使 用 手册 上 
的 描述 去 操作 和 使 用 程序 


与 用 户 相关 的 文档 的 测试 (如 安装 手册 、 用 户 使 用 手册 和 在 线 帮助 手册 ) 
术语 的 正确 性 和 一 致 性 

是 否 覆盖 了 产品 的 所 有 方面 

功能 描述 的 准确 性 

图 形 和 屏幕 截屏 是 否 正确 

举例 是 否 正确 

拼写 和 语法 

超 文本 链接 


测试 策略 


测试 重点 考虑 


测试 通过 准则 | 文档 所 有 内 容 描述 准确 和 正确 


8) 失效 恢复 测试 

失效 恢复 测试 保证 被 测 软件 能 成 功 地 从 硬件 、 软 件 或 网 络 故障 中 失效 恢复 而 不 会 有 数 
据 或 事务 的 丢失 。 

对 于 必须 时 刻 保持 运行 的 系统 .失效 备 援 测试 保证 当 一 个 失效 备 援 条 件 发 生 时 , 蔡 代 或 
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备份 系统 正确 地 接管 失败 的 系统 而 不 会 有 数据 或 事务 的 丢失 。 

恢复 测试 是 一 种 对 立 的 测试 过 程 , 让 应 用 或 系统 遭受 极端 或 仿真 条 件 来 引起 一 个 故障 ， 
例如 设备 的 输入 、 输 出 错误 或 无 效 的 数据 库 指针 和 键 。 调 用 恢复 过 程 ,监控 和 检查 应 用 或 系 
统 来 验证 已 完成 正确 的 应 用 .系统 和 数据 恢复 。 

软件 失效 恢复 测试 策略 如 表 3-21 所 示 。 


表 3-21 软件 失效 恢复 测试 策略 


测试 目标 验证 恢复 过 程 (手工 或 自动 化 ) 正 确 恢复 数据 库 .应 用 和 系统 到 期 望 的 .已 知 的 状态 
手工 或 自动 化 测试 

测试 策略 如 电源 中 断 、 通 信 中 断 、 网 络 中 断 、 操 作 中 断 等 可 以 手工 直接 执行 ; 操作 中 断 ,尤其 是 有 
关 数 据 库 的 操作 、 网 络 操作 等 也 可 以 使 用 一 些 自动 化 工具 执行 

测试 设计 或 执行 中 应 考虑 : 

。 客户 端 电源 中 断 

° 服务 端 电源 中 断 

客户 端 和 服务 器 之 间 通 信 中 断 

网 络 异 常 问题 ,如 瞬间 的 断 开 

关键 功能 执行 过 程 中 操作 异常 中 断 

备份 系统 有 效 性 (如 果 有 ) 

数据 过 滤 过 程 中 断 数据 同步 过 程 中 断 等 

无 效 的 数据 库 指针 或 键 

数据 库 中 无 效 的 或 被 破坏 的 数据 元 素 

测试 通过 准则 toe 


测试 重点 考虑 


2. 性 能 测试 


提 到 软件 性 能 测试 的 时 候 , 有 一 点 是 很 明确 的 : 测试 关注 的 重点 是 “性 能 ”那么 ,本 书 
要 解决 的 第 一 个 问题 就 是 : 究竟 什么 是 “软件 性 能 ”? 

一 般 来 说 ,性 能 是 一 种 指标 ,表明 软件 系统 或 构件 对 于 其 及 时 性 要 求 的 符合 程度 ; 其 
次 ,性 能 是 软件 产品 的 一 种 特性 ,可 以 用 时 间 来 进行 度量 。 

性 能 的 及 时 性 用 响应 时 间或 者 吞吐 量 来 衔 量 。 响 应 时 间 是 对 请 求 做 出 响应 所 需要 的 
时 间 。 

对 于 单个 事务 ,响应 时 间 就 是 完成 事务 所 需 的 时 间 ; 对 于 用 户 任务 ,响应 时 间 体 现 为 端 
到 端的 时 间 。 例 如 ,“ 用 户 单 击 OK 按钮 后 两 秒 内 收 到 结果 ”就 是 一 个 对 用 户 任务 响应 时 间 
的 描述 ,具体 到 这 个 用 户 任务 中 ,可 能 有 多 个 具体 的 事务 需要 完成 ,每 个 事务 都 有 其 单独 的 
响应 时 间 。 

对 交互 式 的 应 用 (例如 典型 的 Web 应 用 ) 来 说 ,一 般 以 用 户 感受 到 的 响应 时 间 来 描述 系 
统 的 性 能 ,而 对 非 交 互 式 应 用 (嵌入 式 系统 或 是 银行 等 的 业务 处 理 系统 ) 而 言 , 响 应 时 间 是 指 
系统 对 事件 产生 响应 所 需要 的 时 间 。 

通常 ,对 软件 性 能 的 关注 是 多 个 层面 的 : 用 户 关 注 软 件 性 能 ,管理 员 关注 软件 性 能 , 产 
品 的 开发 人 员 也 关注 软件 性 能 ,那么 这 些 不 同 的 关注 者 所 关注 的 “性 能 ”的 具体 内 容 是 不 是 
都 完全 相同 呢 ? 如 果 不 同 , 这 些 不 同 又 在 哪里 ? 最 后 ,作为 软件 性 能 测试 工程 师 , 不 同 层 面 
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的 软件 性 能 都 需要 关注 ,在 关注 全 部 这 些 层面 的 性 能 体现 的 时 候 , 又 应 该 注意 哪些 内 容 呢 ? 
下 面 从 三 个 不 同 层面 来 对 软件 性 能 进行 阐述 。 

1) 用 户 视角 的 软件 性 能 

从 用 户 的 角度 来 说 ,软件 性 能 就 是 软件 对 用 户 操作 的 响应 时 间 。 说 得 更 明确 一 点 ,对 用 
户 来 说 , 当 用 户 单 击 一 个 按钮 .发 出 一 条 指令 或 是 在 Web 页 面 上 单 击 一 个 链接 ,从 用 户 单 击 
开始 到 应 用 系统 把 本 次 操作 的 结果 以 用 户 能 察觉 的 方式 展示 出 来 ,这 个 过 程 所 消耗 的 时 间 
就 是 用 户 对 软件 性 能 的 直观 印象 。 图 3-21 以 一 个 Web 系统 为 例 ,说 明了 用 户 的 这 种 印象 。 


[ mm] [CE | 
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HEO 一 用 户 感受 到 
响应 


T 返回 数据 


1 

1 
m 一 

1 


呈现 时 间 


系统 响应 时 间 
图 3-21 Web 系统 的 响应 


必须 要 说 明 的 是 ,用 户 所 体会 到 的 “响应 时 间 ” 既 有 客观 的 成 分 ,也 有 主观 的 成 分 。 例 
如 ,用 户 执 行 了 某 个 操作 ,该 操作 返回 大 量 数据 ,从 客观 的 角度 来 说 ,事务 的 结束 应 该 是 系统 
返回 所 有 的 数据 ,响应 时 间 应 该 是 从 用 户 操作 开始 到 所 有 数据 返回 完成 的 整个 耗 时 ; 但 从 
用 户 的 主观 感知 来 说 ,如 果 采 用 一 种 优化 的 数据 呈现 策略 , 当 少 部 分 数据 返回 之 后 就 立刻 将 
数据 呈现 在 用 户 面前 , 则 用 户 感受 到 的 响应 时 间 就 会 远 远 小 于 实际 的 事务 响应 时 间 ( 顺 便 说 
一 下 ,这 种 技巧 是 在 C/S 结构 的 管理 系统 中 开发 人 员 常 用 的 一 种 技巧 ) 。 

2) 管理 员 视角 的 软件 性 能 

从 管理 员 的 角度 来 看 ,软件 系统 的 性 能 首先 表现 在 系统 的 响应 时 间 上 ,这 一 点 和 用 户 视 
角 是 一 样 的 。 但 管理 员 是 一 种 特殊 的 用 户 , 和 一 般 用 户 相 比 ,除了 会 关注 一 般 用 户 的 体验 之 
外 ,他 还 会 关心 和 系统 状态 相关 的 信息 。 例 如 ,管理 员 已 经 知道 ,在 并 发 用 户 数 为 100 时 ,A 
业务 的 响应 时 间 为 8s, 那 么 此 时 的 系统 状态 如 何 呢 ? 服务 器 的 CPU 使 用 是 不 是 已 经 达到 
了 最 大 值 ? 是 否 还 有 可 用 的 内 存 ? 应 用 服务 器 的 状态 如 何 ? 设置 的 JVM 可 用 内 存 是 否 足 
够 ? 数据 库 的 状况 如 何 ? 是 否 还 需要 进行 一 些 调整 ? 这 些 问 题 普通 的 用 户 并 不 关心 ,因为 
这 不 在 他 们 的 体验 范围 之 内 ; 但 对 管理 员 来 说 ,要 保证 系统 的 稳定 运行 和 持续 的 良好 性 能 ， 
就 必须 关心 这 些 问 题 。 

另 一 方面 ,管理 员 还 会 想 要 知道 系统 具有 多 大 的 可 扩展 性 ,处 理 并 发 的 能 力 如 何 ; 而 
且 , 管 理 员 还 会 希望 知道 系统 可 能 的 最 大 容量 是 什么 ,系统 可 能 的 性 能 瓶颈 在 哪里 ,通过 更 
换 哪 些 设备 或 是 进行 哪些 扩展 能 够 提高 系统 性 能 ,了 解 这 些 情况 ,管理 员 才能 根据 系统 的 用 
户 状 况 制 定 管理 措施 ,在 系统 出 现 计划 之 外 的 用 户 增 长 等 紧急 情况 的 时 候 能 够 立即 制定 相 
应 措施 ,进行 迅速 的 处 理 ; 此 外 ,管理 员 可 能 还 会 关心 系统 在 长 时 间 的 运行 中 是 否 足 够 稳 
定 , 是 否 能 够 不 间断 地 提供 业务 服务 等 。 

因此 ,从 管理 员 的 视角 来 看 ,软件 性 能 绝对 不 仅仅 是 应 用 的 响应 时 间 这 么 一 个 简单 的 
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问题 。 
表 3-22 给 出 了 管理 员 关 注 的 部 分 性 能 相关 问题 的 列表 。 
表 3-22 管理 员 关注 的 部 分 性 能 相关 问题 


管理 员 关 心 的 问题 软件 性 能 描述 
服务 器 的 资源 使 用 状况 合理 吗 资源 利用 率 
应 用 服务 器 和 数据 库 的 资源 使 用 状况 合理 吗 资源 利用 率 
系统 是 否 能 够 实现 扩展 系统 可 扩展 性 
系统 最 多 能 支持 多 少 用 户 的 访问 ? 系统 最 大 的 业务 处 理 量 是 多 少 系统 容量 
系统 性 能 可 能 的 瓶颈 在 哪里 系统 可 扩展 性 
更 换 哪些 设备 能 够 提高 系统 性 能 系统 可 扩展 性 
系统 能 否 支持 7X24h 的 业务 访问 系统 稳定 性 


3) 开发 视角 的 软件 性 能 

从 开发 人 员 的 角度 来 说 ,对 软件 性 能 的 关注 就 更 加 深入 了 。 开 发 人 员 会 关心 主要 的 用 
户 感受 一 一 响应 时 间 ,因为 这 毕竟 是 用 户 的 直接 体验 ; 另外 ,开发 人 员 也 会 关心 系统 的 扩展 
性 等 管理 员 关 心 的 内 容 ,因为 这 些 也 是 产品 需要 面向 的 用 户 ( 特 殊 的 用 户 )。 但 对 开发 人 员 
来 说 ,其 最 想 知 道 的 是 如何 通 过 调整 设计 和 代码 实现 ,或 是 如 何 通 过 调整 系统 设置 等 方法 
提高 软件 的 性 能 表现 ”, 以 及 “如 何 发 现 并 解决 软件 设计 和 开发 过 程 中 产生 的 由 于 多 用 户 访 
问 引 起 的 缺陷 ”, 因 此 ,其 最 关注 的 是 使 性 能 表现 不 佳 的 因素 和 由 于 大 量 用 户 访问 引发 的 软 
件 故 障 , 也 就 是 人 们 通常 所 说 的 “性 能 沽 有 颈 "和 系统 中 存在 的 在 大 量 用 户 访 问 时 表现 出 来 的 
缺陷 。 

举例 来 说 ,对 于 一 个 没有 达到 预期 性 能 规划 的 应 用 ,开发 人 员 最 想 知 道 的 是 ,这 个 糟糕 
的 性 能 表现 究竟 是 由 于 系统 架构 选择 的 不 合理 还 是 由 于 代码 实现 的 问题 引起 ? 由 于 数据 库 
设计 的 问题 引起 ? 抑或 是 由 于 系统 的 运行 环境 引发 ? 

或 者 ,对 于 一 个 即将 发 布 到 现场 给 用 户 使 用 的 应 用 ,开发 人 员 可 能 会 想 要 知道 当 大 量 用 
户 访问 这 个 系统 时 ,系统 会 不 会 出 现 某 些 故障 ,例如 ,是 否 存在 由 于 资源 竞争 引起 的 挂 起 ? 
是 否 存在 由 于 内 存 处 理 等 问题 引起 的 系统 故障 ? 

因此 ,对 开发 人 员 来 说 ,单纯 获知 系统 性 能 “好 ?或 者 “不 好 ?的 评价 并 没有 太 大 的 意义 ， 
他 们 更 想 知道 的 是 “哪些 地 方 是 引起 不 好 的 性 能 表现 的 根源 ?或 是 “哪里 可 能 存在 故障 发 生 
的 可 能 ”。 

表 3-23 给 出 了 开发 视角 的 软件 性 能 关注 内 容 。 


表 3-23 开发 人 员 关 注 的 性 能 问题 


开发 人 员 关 心 的 问题 问题 所 属 层次 
架构 设计 是 否 合理 系统 架构 
数据 库 设计 是 否 存在 问题 数据 库 设计 
代码 是 否 存在 性 能 方面 的 问题 代码 
系统 中 是 否 有 不 合理 的 内 存 使 用 方式 代码 
系统 中 是 否 存在 不 合理 的 线程 同步 方式 设计 与 代码 


系统 中 是 否 存在 不 合理 的 资源 竞争 设计 与 代码 
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4) SEI 负 载 测试 计划 过 程 

SEI 负载 测试 计划 过 程 (SEI Load Testing Planning Process) 是 一 个 关注 于 负载 测试 计 
划 的 方法 ,其 目标 是 产生 “清晰 、 易 理解 ,可 验证 的 负载 测试 计划 ”。SEI 负载 测试 计划 过 程 
包括 6 个 关注 的 区 域 (Area): 目标 .有 用户. 用例 .生产 环境 测试 环 境 和 测试 场景 。 

SEI 负载 测 试 计 划 过 程 将 以 上 述 6 个 区 域 作 为 负载 测试 计划 需要 重点 关注 和 考虑 的 内 
容 , 其 重点 关注 以 下 几 个 方面 的 内 容 。 

CD 生产 环境 与 测试 环境 的 不 同 。 由 于 负载 测试 环境 与 实际 的 生产 环境 存在 一 定 的 差 
异 , 因 此 ,在 测试 环境 上 对 应 用 系统 进行 的 负载 测试 结果 很 可 能 不 能 准确 反映 该 应 用 系统 在 
生产 环境 上 的 实际 性 能 表现 ,为 了 规避 这 个 风险 ,必须 仔细 设计 测试 环境 。 

(2) 用 户 分 析 。 用 户 是 对 被 测 应 用 系统 性 能 表现 最 关注 和 受 影响 最 大 的 对 象 ,因此 , 必 
须 通 过 对 用 户 行为 进行 分 析 ,依据 用 户 行为 模型 建立 用 例 和 场景 。 

(3) 用 例 。 用 例 是 用 户 使 用 某 种 顺序 和 操作 方式 对 业务 过 程 进 行 实现 的 过 程 ,对 负载 
测试 来 说 ,用 例 的 作用 主要 在 于 分 析 和 分 解 出 关键 的 业务 ,判断 每 个 业务 发 生 的 频 度 、 业 务 
出 现 性 能 问题 的 风险 等 。 

从 SEI 负载 测试 计划 过 程 的 描述 中 可 以 看 到 ,SEI 负载 测试 计划 过 程 给 出 了 负载 测试 
需要 关注 的 重点 区 域 , 但 严格 来 说 ,其 并 不 能 被 称 为 具体 的 方法 论 , 因 为 其 仅 给 出 了 对 测试 
计划 过 程 的 一 些 关 注 内 容 , 而 没有 能 够 形成 实际 的 可 操作 的 过 程 。 

同 功 能 测试 一 样 ,性 能 测试 也 必须 经 历 测试 需求 .测试 设计 、 测 试 执行 、 测 试 分 析 等 阶 
段 ,但 由 于 性 能 测试 自身 的 特殊 性 (例如 ,需要 引入 工具 ,分 析 阶 段 相 对 重要 ) ,性 能 测试 过 程 
又 不 能 完全 套用 功能 测试 过 程 。 

SEI 负载 测试 计划 过 程 在 负载 测试 需要 关注 的 具体 内 容 上 提供 了 参考 ,但 其 并 不 是 一 
个 完整 的 测试 过 程 。 

5) RBI Ji 

RBI( Rapid Bottleneck Identify) 方 法 是 Empirix 公司 提出 的 一 种 用 于 快速 识别 系统 性 
能 瓶颈 的 方法 。 该 方法 基于 以 下 一 些 事实 。 

CD 发 现 的 80 儿 系统 的 性 能 瓶颈 都 由 吞吐 量 制约 ; 

(2) 并 发 用 户 数 和 吞吐 量 瓶 颈 之 间 存 在 一 定 的 关联 ; 

(3) 采用 春 吐 量 测试 可 以 更 快速 定位 问题 。 

RBI 方 法 首先 访问 服务 器 上 的 “小 页 面 " 和 “简单 应 用 ”, 从 应 用 服务 器 、 网 络 等 基础 的 层 
次 上 了 解 系统 奉 吐 量 表现 ; 其 次 选择 不 同 的 场景 , 设 定 不 同 的 并 发 用 户 数 ,使 其 乔 吐 量 保持 
基本 一 致 的 增长 趋势 ,通过 不 断 增加 并 发 用 户 数 和 吞吐 量 , 观 察 系统 的 性 能 表现 。 

在 确定 具体 的 性 能 瓶颈 时 ,RBI 将 性 能 瓶颈 的 定位 按照 一 种 * 自 上 而 下 ?的 分 析 方 式 进 
行 分 析 , 首 先 确 定 是 由 并 发 还 是 由 吞吐 量 引发 的 性 能 表现 限制 ,然后 从 网 络 数据库、 应 用 服 
务 器 和 代码 本 身 4 个 环节 确定 系统 性 能 具体 的 瓶颈 。 

RBI 方 法 在 性 能 瓶 锋 的 定位 过 程 中 能 发 挥 良好 的 作用 ,其 对 性 能 分 析 和 瓶颈 定位 的 方 
法 值得 借鉴 ,但 其 也 不 是 完整 的 性 能 测试 过 程 。 

6) 性 能 下 降 曲 线 分 析 法 

性 能 下 降 曲 线 实际 上 描述 的 是 性 能 随 用 户 数 增长 而 出 现下 降 趋 势 的 曲线 。 而 这 里 所 说 
的 “性 能 ?可 以 是 响应 时 间 ,也 可 以 是 吞吐 量 或 是 单 击 数 / 秒 的 数据 。 当 然 , 一 般 来 说 性 能 ” 
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主要 是 指 响应 时 间 。 
图 3-22 给 出 了 一 个 “响应 时 间 下 降 曲 线 ” 的 示例 。 
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图 3-22 一 条 典型 的 响应 时 间 性 能 下 降 曲 线 示例 


从 图 3-22 可 以 看 到 ,一 条 曲线 可 以 分 为 以 下 几 个 部 分 。 
(1) 单 用 户 区 域 一 一 对 系统 的 一 个 单 用 户 的 响应 时 间 。 这 对 建立 性 能 的 参考 值 很 有 作用 。 
(2) 性 能 平坦 区 一 一 在 不 进行 更 多 性 能 调 优 情况 下 所 能 期 望 达到 的 最 佳 性 能 。 这 个 区 


域 可 被 用 作 基 线 或 是 benchmark, 
(3) 压力 区 域 一 一 应 用 “轻微 下 降 ” 的 地 方 。 典 型 的 .最 大 的 建议 用 户 负载 是 压力 区 域 
的 开始 。 


(4) 性 能 拐点 一 一 性 能 开始 “急剧 下 降 ” 的 点 。 

这 几 个 区 域 实际 上 明确 标识 了 系统 性 能 最 优秀 的 区 间 ,系统 性 能 开始 变 坏 的 区 间 ,以 及 
系统 性 能 出 现 急剧 下 降 的 点 。 对 性 能 测试 来 说 ,找到 这 些 区 间 和 拐点 ,也 就 可 以 找到 性 能 撼 
颈 产 生 的 地 方 。 

因此 ,对 性 能 下 降 曲 线 分 析 法 来 说 ,主要 关注 的 是 性 能 下 降 曲 线 上 的 各 个 区 间 和 相应 的 
抛 点 ,通过 识别 不 同 的 区 间 和 拐点 ,从 而 为 性 能 瓶颈 识别 和 性 能 调 优 提供 依据 。 

7) Segue 提供 的 性 能 测试 过 程 

图 3-23 给 出 了 Segue 公司 Silk Performer 提供 的 性 能 测试 过 程 。 该 性 能 测试 过 程 是 一 
个 不 断 try-check 的 过 程 。 

Silk Performer 提供 的 性 能 测试 过 程 从 确定 性 能 基线 开始 ,通过 单 用 户 对 应 用 的 访问 
获取 性 能 取 值 的 基线 ,然后 设 定 可 接受 的 性 能 目标 (响应 时 间 ) ,用 不 同 的 并 发 用 户 数 等 重复 
进行 测试 。 

Segue 提供 的 这 种 性 能 测试 方法 非常 适合 性 能 调 优 和 性 能 优化 ,通过 不 断 重复 的 try- 
check 过 程 ,可 以 逐一 找到 可 能 导致 性 能 瓶颈 的 地 方 并 对 其 进行 优化 。 

但 Segue 提供 的 这 个 性 能 测试 过 程 模型 存在 与 LoadRunner 的 性 能 测试 过 程 同 样 的 问 
题 , 就 是 过 于 依赖 工具 自身 ,另外 ,该 过 程 模型 缺乏 对 计划 、 设 计 的 阶段 的 明确 划分 ,也 没有 
给 出 具体 的 活动 和 目标 。 
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图 3-23 Segue Silk Performer 提供 的 性 能 测试 过 程 
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.软件 测试 过 程 模 型 有 哪儿 种 ?它们 之 间 有 什么 区 别 ? 

. 软件 生命 周期 一 般 分 为 哪儿 个 阶段 ? 

.常见 的 软件 开发 模型 有 哪儿 种 ? 各 有 什么 特点 ? 

. 单元 测试 .集成 测试 和 系统 测试 的 主要 工作 内 容 是 什么 ? 
. 请 设计 一 个 单元 测试 用 例 。 

. 进行 软件 安全 性 测试 的 策略 是 什么 ? 
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本 章 学 习 重 点 


熟悉 面向 对 象 测试 模型 。 

了 解 面向 对 象 的 各 种 测试 所 涉及 的 内 容 。 
了 解 AOP 的 概念 。 

熟悉 AOP 测试 方法 。 

了 解 SOA 的 概念 。 

熟悉 SOA 测试 技术 。 


本 章 学 习 难 点 


* 部 悉 面向 对 象 测 试 模型 。 
* 熟悉 AOP 测试 方法 。 
。 熟悉 SOA 测试 技术 。 


人 1 面向 对 象 的 测试 


面向 对 象 技术 是 一 种 全 新 的 软件 开发 技术 , 正 逐 渐 代 蔡 被 广泛 使 用 的 面向 过 程 开发 方 
法 ,被 看 成 是 解决 软件 危机 的 新 兴 技术 。 面 向 对 象 技术 产生 更 好 的 系统 结构 ,更 规范 的 编程 
风格 , 极 大 地 优化 了 数据 使 用 的 安全 性 ,提高 了 程序 代码 的 重用 ,一 些 人 就 此 认为 面向 对 象 
技术 开发 出 的 程序 无 须 进 行 测 试 。 应 该 看 到 ,尽管 面向 对 象 技术 的 基本 思想 保证 了 软件 应 
该 有 更 高 的 质量 ,但 实际 情况 却 并 非 如 此 ,因为 无 论 采 用 什么 样 的 编程 技术 ,编程 人 员 的 错 
误 都 是 不 可 避免 的 ,而 且 由 于 面向 对 象 技术 开发 的 软件 代码 重用 率 高 ,更 需要 严格 测试 , 避 
免 错 误 的 繁衍 。 因 此 ,软件 测试 并 没有 因 面 向 对 象 编程 的 兴起 而 丧失 掉 它 的 重要 性 。 

从 1982 年 在 美国 北 卡罗来纳 大 学 召开 首次 软件 测试 的 正式 技术 会 议 至 今 ,软件 测试 理 
论 迅 速 发 展 , 并 相应 出 现 了 各 种 软件 测试 方法 ,使 软件 测试 技术 得 到 极 大 的 提高 。 然 而 ,一 
度 实践 证 明 行 之 有 效 的 软件 测试 对 面向 对 象 技 术 开 发 的 软件 多 少 显得 有 些 力不从心 。 尤 其 
是 面向 对 象 技术 所 独 有 的 多 态 、 继 承 、 封 装 等 新 特点 ,产生 了 传统 语言 设计 所 不 存在 的 错误 
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可 能 性 ,或 者 使 得 传统 软件 测试 中 的 重点 不 再 显得 突出 ,或 者 使 原来 测试 经 验 认为 和 实践 证 
明 的 次 要 方面 成 为 主要 问题 。 例 如 : 
在 传统 的 面向 过 程 程序 中 ,对 于 函数 


Y= Function(x); 


只 需要 考虑 一 个 函数 (Function()) 的 行为 特点 ,而 在 面向 对 象 程序 中 ,不 得 不 同时 考虑 基 类 
函数 (Base: :Function()) 的 行为 和 继承 类 函数 (Derived: :Function()) 的 行为 。 

面向 对 象 程序 的 结构 不 再 是 传统 的 功能 模块 结构 ,作为 一 个 整体 , 原 有 和 集成 测试 所 要 求 
的 逐步 将 开发 的 模块 搭建 在 一 起 进行 测试 的 方法 已 成 为 不 可 能 。 而 且 , 面 向 对 象 软件 抛弃 
了 传统 的 开发 模式 ,对 每 个 开发 阶段 都 有 不 同 于 以 往 的 要 求 和 结果 ,已 经 不 可 能 用 功能 细 化 
的 观点 来 检测 面向 对 象 分 析 和 设计 的 结果 。 因 此 ,传统 的 测试 模型 对 面向 对 象 软件 已 经 不 
再 适用 。 针 对 面向 对 象 软件 的 开发 特点 ,应 该 有 一 种 新 的 测试 模型 。 


1. 面向 对 象 测试 模型 


面向 对 象 的 开发 模型 突破 了 传统 的 瀑布 模型 ,将 开 
发 分 为 面向 对 象 分 析 (Object-Orient Analysis. OOA), 
面向 对 象 设计 (Object-Orient Design. OOD) 和 面向 对 象 
编程 (Object-Orient Programming. OOP) 三 个 阶段 。 分 a 
析 阶 段 产生 整个 问题 空间 的 抽象 描述 ,在 此 基础 上 , 进 一 
步 归纳 出 适用 于 面向 对 象 编程 语言 的 类 和 类 结构 ,最 后 a 
形成 代码 。 由 于 面向 对 象 的 特点 ,采用 这 种 开发 模型 能 
有 效 地 将 分 析 设 计 的 文本 或 图 表 代码 化 ,不 断 适 应 用 户 OOA 
需求 的 变动 。 针 对 这 种 开发 模型 ,结合 传统 的 测试 步骤 
的 划分 ,作者 建议 一 种 整个 软件 开发 过 程 中 不 断 测 试 的 O08 
测试 模型 ,使 开发 阶段 的 测试 与 编码 完成 后 的 单元 测试 、 
集成 测试 、 系 统 测试 成 为 一 个 整体 。 测 试 模型 如 图 4-1 
所 示 。 

OOA Test 和 OOD Test 是 对 分 析 结 果 和 设计 结果 的 测试 ,主要 是 对 分 析 设 计 产 生 的 
文本 进行 ,是 软件 开发 前 期 的 关键 性 测试 。OOP Test 主要 针对 编程 风格 和 程序 代码 实现 
进行 测试 ,其 主要 的 测试 内 容 在 面向 对 象 单元 测试 和 面向 对 象 集成 测试 中 体现 。 面 向 对 象 
单元 测试 是 对 程序 内 部 具体 单一 的 功能 模块 的 测试 ,如 果 程 序 是 用 C++ 语言 实现 ,主要 就 是 
对 类 成 员 函 数 的 测试 。 面 向 对 象 单元 测试 是 进行 面向 对 象 集成 测试 的 基础 。 面 向 对 象 集成 
测试 主要 对 系统 内 部 的 相互 服务 进行 测试 ,如 成 员 函 数 间 的 相互 作用 、 类 间 的 消息 传递 等 。 
面向 对 象 集成 测试 不 但 要 基于 面向 对 象 单元 测试 ,更 要 参见 OOD 或 OOD Test 结果 。 面 向 
对 象 系统 测试 是 基于 面向 对 象 集成 测试 的 最 后 阶段 的 测试 ,主要 以 用 户 需求 为 测试 标准 , 需 
要 借鉴 OOA R OOA Test 结果 。 


OO System Test 
OO Integrate Test 
OO 


图 4-1 面 对 对 象 测试 模型 


2. 面向 对 象 分 析 的 测试 
传统 的 面向 过 程 分 析 是 一 个 功能 分 解 的 过 程 ,是 把 一 个 系统 看 成 可 以 分 解 的 功能 的 集 
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合 。 这 种 传统 的 功能 分 解 分 析 法 的 着 眼 点 在 于 一 个 系统 需要 什么 样 的 信息 处 理 方法 和 过 
程 ,以 过 程 的 抽象 来 对 待 系统 的 需要 。 而 面向 对 象 分 析 是 “把 E-R 图 和 语义 网 络 模型 , 即 信 
息 造型 中 的 概念 ,与 面向 对 象 程序 设计 语言 中 的 重要 概念 结合 在 一 起 而 形成 的 分 析 方 法 ”， 
最 后 通常 是 得 到 问题 空间 的 图 表 的 形式 描述 。 

OOA 直接 映射 问题 空间 ,全 面 地 将 问题 空间 中 实现 功能 的 现实 抽象 化 。 将 问题 空间 中 
的 实例 抽象 为 对 象 (不 同 于 C++ 中 的 对 象 概念 ) ,用 对 象 的 结构 反映 问题 空间 的 复杂 实例 和 
复杂 关系 ,用 属性 和 服务 表示 实例 的 特性 和 行为 。 对 一 个 系统 而 言 ,与 传统 分 析 方法 产生 的 
结果 相反 ,行为 是 相对 稳定 的 ,结构 是 相对 不 稳定 的 ,这 更 充分 反映 了 现实 的 特性 。OOA 的 
结果 是 为 后 面 阶段 类 的 选 定 和 实现 ,类 层次 结构 的 组 织 和 实现 提供 平台 。 因 此 ,OOA 对 问 
题 空 间 分 析 抽 象 的 不 完整 ,最终 会 影响 软件 的 功能 实现 ,导致 软件 开发 后 期 大 量 可 避免 的 修 
补 工作 ; 而 一 些 宛 余 的 对 象 或 结构 会 影响 类 的 选 定 、 程 序 的 整体 结构 或 增加 程序 员 不 必要 
的 工作 量 。 因 此 ,本 文 对 OOA 的 测试 重点 在 其 完整 性 和 宛 余 性 。 

尽管 OOA 的 测试 是 一 个 不 可 分 割 的 系统 过 程 ,为 叙述 的 方便 ,Coad 方法 所 提出 的 
OOA 实现 步骤 ,对 OOA 阶段 的 测试 划分 为 以 下 5 个 方面 。 

CD 对 认定 的 对 象 的 测试 ; 

(2) 对 认定 的 结构 的 测试 ; 

CD 对 认定 的 主题 的 测试 ; 

(4) 对 定义 的 属性 和 实例 关联 的 测试 ; 

(5) 对 定义 的 服务 和 消息 关联 的 测试 。 

对 象 .结构 .主题 等 在 OOA 结果 中 的 位 置 ,如 图 4-2 所 示 。 


记录 w | g 


EE 7 saa SSES — x 
r 消息 可 

AB |! 属性 Va 

姓名 |) » ; 


对 象 


图 4-2 车 辆 管理 系统 部 分 OOA 分 析 结 果 示 意图 


1) 对 认定 的 对 象 的 测试 

OOA 中 认定 的 对 象 是 对 问题 空间 中 的 结构 .其 他 系统 .设备 .被 记忆 的 事件 .系统 涉及 
的 人 员 等 实际 实例 的 抽象 。 对 它 的 测试 可 以 从 如 下 方面 考虑 。 

CD 认定 的 对 象 是 否 全面 , 是 否 问题 空间 中 所 有 涉及 的 实例 都 反映 在 认定 的 抽象 对 
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象 中 。 

(2) 认定 的 对 象 是 否 具有 多 个 属性 。 只 有 一 个 属性 的 对 象 通常 应 看 成 其 他 对 象 的 属 
性 ,而 不 是 抽象 为 独立 的 对 象 。 

(3) 对 认定 为 同一 对 象 的 实例 是 否 有 共同 的 ,区 别 于 其 他 实例 的 共同 属性 。 

(4) 对 认定 为 同一 对 象 的 实例 是 否 提 供 或 需要 相同 的 服务 ,如 果 服 务 随 着 不 同 的 实例 
而 变化 ,认定 的 对 象 就 需要 分 解 或 利用 继承 性 来 分 类 表示 。 

(5) 如 果 系 统 没有 必要 始终 保持 对 象 代表 的 实例 的 信息 ,提供 或 者 得 到 关于 它 的 服务 ， 
认定 的 对 象 也 无 必要 。 

(6) 认定 的 对 象 的 名 称 应 该 尽量 准确 ,适用 。 

2) 对 认定 的 结构 的 测试 

在 Coad 方法 中 ,认定 的 结构 指 的 是 多 种 对 象 的 组 织 方式 ,用 来 反映 问题 空间 中 的 复杂 
实例 和 复杂 关系 。 认 定 的 结构 分 为 两 种 : 分 类 结构 和 组 装 结构 。 分 类 结构 体现 了 问题 空间 
中 实例 的 一 般 与 特殊 的 关系 ,组 装 结构 体现 了 问题 空间 中 实例 整体 与 局 部 的 关系 。 

对 认定 的 分 类 结构 的 测试 可 从 如 下 方面 着 手 。 

CD 对 于 结构 中 的 一 种 对 象 ,尤其 是 处 于 高 层 的 对 象 ,是 否 在 问题 空间 中 含有 不 同 于 下 
一 层 对 象 的 特殊 可 能 性 , 即 是 否 能 派生 出 下 一 层 对 象 。 

(2) 对 于 结构 中 的 一 种 对 象 ,尤其 是 处 于 同一 低层 的 对 象 ,是 否 能 抽象 出 在 现实 中 有 意 
义 的 更 一 般 的 上 层 对 象 。 

CD 对 所 有 认定 的 对 象 ,是 否 能 在 问题 空间 内 向 上 层 抽 象 出 在 现实 中 有 意义 的 对 象 。 

(4) 高 层 的 对 象 的 特性 是 否 完全 体现 下 层 的 共性 。 

(5) 低层 的 对 象 是 否 有 高 层 特性 基础 上 的 特殊 性 。 

对 认定 的 组 装 结构 的 测试 从 如 下 方面 人 手 。 

CD 整体 (对 象 ) 和 部 件 ( 对 象 ) 的 组 装 关系 是 否 符合 现实 的 关系 。 

(2) 整体 (对 象 ) 的 部 件 (对 象 ) 是 否 在 考虑 的 问题 空间 中 有 实际 应 用 。 

(3) 整体 (对 象 ) 中 是 否 遗 漏 了 反映 在 问题 空间 中 有 用 的 部 件 ( 对 象 ) 。 

CD 部 件 ( 对 象 ) 是 否 能 够 在 问题 空间 中 组 装 新 的 有 现实 意义 的 整体 (对 象 ) 。 

3) 对 认定 的 主题 的 测试 

主题 是 在 对 象 和 结构 的 基础 上 更 高 一 层 的 抽象 ,是 为 了 提供 OOA 分 析 结 果 的 可 见 性 ， 
如 同文 章 对 各 部 分 内 容 的 概要 。 对 主题 层 的 测试 应 该 考虑 以 下 方面 。 

(1) 贯彻 George Miller 的 “7 十 2 原则 ,如 果 主 题 个 数 超过 7 个 ,就 要 求 对 有 较 密 切 属 
性 和 服务 的 主题 进行 归并 。 

(2) 主题 所 反映 的 一 组 对 象 和 结构 是 否 具有 相同 和 相近 的 属性 和 服务 。 

(3) 认定 的 主题 是 否 是 对 象 和 结构 更 高 层 的 抽象 ,是否 便于 理解 OOA 结果 的 概貌 。 

(4) 主题 间 的 消息 联系 (抽象 ) 是 否 代表 了 主题 所 反映 的 对 象 和 结构 之 间 的 所 有 关联 。 

4) 对 定义 的 属性 和 实例 关联 的 测试 

属性 是 用 来 描述 对 象 或 结构 所 反映 的 实例 的 特性 ,而 实例 关联 是 反映 实例 集合 间 的 映 
射 关 系 。 对 属性 和 实例 关联 的 测试 从 如 下 方面 考虑 。 

(1) 定义 的 属性 是 否 对 相应 的 对 象 和 分 类 结构 的 每 个 现实 实例 都 适用 。 

(2) 定义 的 属性 在 现实 世界 是 否 与 这 种 实例 关系 密切 。 
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(3) 定义 的 属性 在 问题 空间 是 否 与 这 种 实例 关系 密切 。 

(4) 定义 的 属性 是 否 能 够 不 依赖 于 其 他 属性 被 独立 理解 。 

(5) 定义 的 属性 在 分 类 结构 中 的 位 置 是 否 恰当 ,低层 对 象 的 共有 属性 是 否 在 上 层 对 象 
属性 体现 。 

(6) 在 问题 空间 中 每 个 对 象 的 属性 是 否定 义 完整 。 

(7) 定义 的 实例 关联 是 否 符合 现实 。 

(8) 在 问题 空间 中 实例 关联 是 否定 义 完整 ,特别 需要 注意 1- 多 和 多 -多 的 实例 关联 。 

5) 对 定义 的 服务 和 消息 关联 的 测试 

定义 的 服务 ,就 是 定义 的 每 一 种 对 象 和 结构 在 问题 空间 所 要 求 的 行为 。 由 于 问题 空间 
中 实例 间 必 要 的 通信 ,在 OOA 中 相应 需要 定义 消息 关联 。 对 定义 的 服务 和 消息 关联 的 测 
试 从 如 下 方面 进行 。 

(1) 对 象 和 结构 在 问题 空间 的 不 同 状态 是 否定 义 了 相应 的 服务 。 

(2) 对 象 或 结构 所 需要 的 服务 是 否 都 定义 了 相应 的 消息 关联 。 

(3) 定义 的 消息 关联 所 指引 的 服务 提供 是 否 正 确 。 

(4) 沿 着 消息 关联 执行 的 线程 是 否 合理 ,是 否 符合 现实 过 程 。 

(5) 定义 的 服务 是 否 重复 ,是 否定 义 了 能 够 得 到 的 服务 。 


3. 面向 对 象 设计 的 测试 


通常 的 结构 化 的 设计 方法 ,用 的 是 面向 作业 的 设计 方法 , 它 把 系统 分 解 以 后 ,提出 一 组 
作业 ,这 些 作 业 是 以 过 程 实现 系统 的 基础 构造 ,把 问题 域 的 分 析 转 化 为 求解 域 的 设计 ,分 析 
的 结果 是 设计 阶段 的 输入 。 

而 面向 对 象 设计 (OOD) 采 用 “造型 的 观点 ”, 以 OOA 为 基础 归纳 出 类 ,并 建立 类 结构 或 
进一步 构造 成 类 库 ,实现 分 析 结 果 对 问题 空间 的 抽象 。OOD 归纳 的 类 ,可 以 是 对 象 简单 的 
延续 ,可 以 是 不 同 对 象 的 相同 或 相似 的 服务 。 由 此 可 见 ,OOD 不 是 在 OOA 上 的 另 一 思维 
方式 的 大 动 干戈 ,而 是 OOA 的 进一步 细 化 和 更 高 层 的 抽象 。 所 以 ,OOD 与 OOA 的 界限 通 
常 是 难以 严格 区 分 的 。OOD 确定 类 和 类 结构 不 仅 是 满足 当前 需求 分 析 的 要 求 ,更 重要 的 是 
通过 重新 组 合 或 加 以 适当 的 补充 ,能 方便 实现 功能 的 重用 和 扩 增 ,以 不 断 适 应 用 户 的 要 求 。 
因此 ,对 OOD 的 测试 ,作者 建议 针对 功能 的 实现 和 重用 以 及 对 OOA 结果 的 拓展 ,从 如 下 三 
方面 考虑 。 

1) 对 认定 的 类 的 测试 

OOD 认定 的 类 可 以 是 OOA 中 认定 的 对 象 , 也 可 以 是 对 象 所 需要 的 服务 的 抽象 ,对 象 
所 具有 的 属性 的 抽象 。 认 定 的 类 原则 上 应 该 尽量 基础 性 ,这 样 才 便于 维护 和 重用 。 可 参考 
以 下 一 些 准 则 来 测试 认定 的 类 。 

d) 是 否 涵盖 OOA 中 所 有 认定 的 对 象 。 

(2) 是 否 能 体现 OOA 中 定义 的 属性 。 

(3) 是 否 能 实现 OOA 中 定义 的 服务 。 

(4) 是 否 对 应 着 一 个 含义 明确 的 数据 抽象 。 

(5) 是 否 尽 可 能 少 地 依赖 其 他 类 。 

(6) 类 中 的 方法 (C++ : 类 的 成 员 函 数 ) 是 否 单 用 途 。 
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2) 对 构造 的 类 层次 结构 的 测试 

为 能 充分 发 挥 面 向 对 象 的 继承 共享 特性 ,OOD 的 类 层次 结构 ,通常 基于 OOA 中 产生 
的 分 类 结构 的 原则 来 组 织 ,着 重 体现 父 类 和 子 类 间 一 般 性 和 特殊 性 。 在 当前 的 问题 空间 ,对 
类 层次 结构 的 主要 要 求 是 能 在 解 空间 构造 实现 全 部 功能 的 结构 框架 。 为 此 ,测试 如 下 方面 。 

(1) 类 层次 结构 是 否 涵盖 所 有 定义 的 类 。 

(2) 是 否 能 体现 OOA 中 所 定义 的 实例 关联 。 

(3) 是 否 能 实现 OOA 中 所 定义 的 消息 关联 。 

(4) 子 类 是 否 具 有 父 类 没有 的 新 特性 。 

(5) 子 类 间 的 共同 特性 是 否 完全 在 父 类 中 得 以 体现 。 

3) 对 类 库 支持 的 测试 

对 类 库 的 支持 虽然 也 属于 类 层次 结构 的 组 织 问题 ,但 其 强调 的 重点 是 再 次 软件 开发 的 
重用 。 由 于 它 并 不 直接 影响 当前 软件 的 开发 和 功能 实现 ,因此 ,将 其 单独 提出 来 测试 ,也 可 
作为 对 高 质量 类 层次 结构 的 评估 。 拟 订 测试 点 如 下 。 

CD 一 组 子 类 中 关于 某 种 含义 相同 或 基本 相同 的 操作 ,是否 有 相同 的 接口 (包括 名 字 和 


参数 表 ) 。 
(2) 类 中 方法 (C++ : 类 的 成 员 函 数 ) 功 能 是 否 较 单纯 ,相应 的 代码 行 是 否 较 少 (建议 不 
超过 30 ÍF). 


(3) 类 的 层次 结构 是 否 是 深度 大 ,宽度 小 。 
4. 面向 对 象 编程 的 测试 


典型 的 面向 对 象 程序 具有 继承 .封装 和 多 态 的 新 特性 ,这 使 得 传统 的 测试 策略 必须 有 所 
改变 。 封 装 是 对 数据 的 隐藏 ,外界 只 能 通过 被 提供 的 操作 来 访问 或 修改 数据 ,这 样 降低 了 数 
据 被 任意 修改 和 读 写 的 可 能 性 ,降低 了 传统 程序 中 对 数据 非法 操作 的 测试 。 继 承 是 面向 对 
象 程序 的 重要 特点 ,继承 使 得 代码 的 重用 率 提高 ,同时 也 使 错误 传播 的 概率 提高 。 继 承 使 得 
传统 测试 遇见 了 这 样 一 个 难题 : 对 继承 的 代码 究 竞 应 该 怎样 测试 ?( 参 见面 向 对 象 单元 测 
试 。) 多 态 使 得 面向 对 象 程序 对 外 呈现 出 强大 的 处 理 能 力 , 但 同时 却 使 得 程序 内 “同一 ”函数 
的 行为 复杂 化 ,测试 时 不 得 不 考虑 不 同类 型 具体 执行 的 代码 和 产生 的 行为 。 

面向 对 象 程序 是 把 功能 的 实现 分 布 在 类 中 。 能 正确 实现 功能 的 类 ,通过 消息 传递 来 协 
同 实现 设计 要 求 的 功能 。 正 是 这 种 面向 对 象 程序 风格 ,将 出 现 的 错误 能 精确 地 确定 在 某 一 
具体 的 类 。 因 此 ,在 面向 对 象 编程 阶段 ,忽略 类 功能 实现 的 细则 ,将 测试 的 目光 集中 在 类 功 
能 的 实现 和 相应 的 面向 对 象 程序 风格 ,主要 体现 为 以 下 两 个 方面 (假设 编程 使 用 C++ 语 言 )。 

1) 数据 成 员 是 否 满足 数据 封装 的 要 求 

数据 封装 是 数据 和 数据 有 关 的 操作 的 集合 。 检 查 数据 成 员 是 否 满足 数据 封装 的 要 求 ， 
基本 原则 是 数据 成 员 是 否 被 外 界 ( 数 据 成 员 所 属 的 类 或 子 类 以 外 的 调用 ) 直 接 调 用 。 更 直观 
地 说 , 当 改 变数 据 成 员 的 结构 时 ,是 否 影响 了 类 的 对 外 接口 ,是 否 会 导致 相应 外 界 必须 改动 。 
值得 注意 ,有 时 强制 的 类 型 转换 会 破坏 数据 的 封装 特性 。 例 如 : 

class Hiden 


{private: 
inta-1; 
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char *p- "hiden"; } 
class Visible 

(public: 

int b=2; 

char * s= "visible"; } 


Hiden pp; 

Visible * qq= (Visible * )&pp; 

在 上 面 的 程序 段 中 ,pp 的 数据 成 员 可 以 通过 qq 被 随意 访问 。 

2) 类 是 否 实现 了 要 求 的 功能 

类 所 实现 的 功能 ,都 是 通过 类 的 成 员 函 数 执行 。 在 测试 类 的 功能 实现 时 ,应 该 首先 保证 
类 成 员 函 数 的 正确 性 。 单 独 地 看 待 类 的 成 员 函 数 ,与 面向 过 程 程序 中 的 函数 或 过 程 没有 本 
质 的 区 别 , 几 乎 所 有 传统 的 单元 测试 中 所 使 用 的 方法 ,都 可 在 面向 对 象 的 单元 测试 中 使 用 。 
具体 的 测试 方法 在 面向 对 象 的 单元 测试 中 介绍 。 类 函数 成 员 的 正确 行为 只 是 类 能 够 实现 要 
求 的 功能 的 基础 ,类 成 员 函 数 间 的 作用 和 类 之 间 的 服务 调用 是 单元 测试 无 法 确定 的 。 因 此 ， 
需要 进行 面向 对 象 的 集成 测试 。 具 体 的 测试 方法 在 面向 对 象 的 集成 测试 中 介绍 。 需 要 着 重 
声明 ,测试 类 的 功能 ,不 能 仅 满足 于 代码 能 无 错 运行 或 被 测试 类 能 提供 的 功能 无 错 , 应 该 以 
所 做 的 OOD 结果 为 依据 ,检测 类 提供 的 功能 是 否 满 足 设计 的 要 求 ,是 否 有 缺陷 。 必 要 时 
(如 通过 OOD 结果 仍 不 清楚 明确 的 地 方 ) 还 应 该 参照 OOA 的 结果 ,以 它 为 最 终 标准 。 


5. 面向 对 象 的 单元 测试 


传统 的 单元 测试 是 针对 程序 的 函数 、 过 程 或 完成 某 一 定 功能 的 程序 块 。 沿 用 单元 测试 
的 概念 ,实际 测试 类 成 员 函 数 。 一 些 传统 的 测试 方法 在 面向 对 象 的 单元 测试 中 都 可 以 使 用 ， 
如 等 价 类 划分 法 ,因果 图 法 , 边 值 分 析 法 ,逻辑 覆盖 法 ,路径 分 析 法 ,程序 插 装 法 等 。 单 元 测 
试 一 般 建 议 由 程序 员 完 成 。 

用 于 单元 级 测试 进行 的 测试 分 析 ( 提 出 相应 的 测试 要 求 ) 和 测试 用 例 ( 选 择 适当 的 输入 ， 
达到 测试 要 求 ) ,规模 和 难度 等 均 远 小 于 后 面 将 介绍 的 对 整个 系统 的 测试 分 析 和 测试 用 例 ， 
而 且 强 调 对 语句 应 该 有 100% 的 执行 代码 覆盖 率 。 在 设计 测试 用 例 选择 输入 数据 时 ,可 以 
基于 以 下 两 个 假设 。 

(1) 如 果 函 数 (程序 ) 对 某 一 类 输入 中 的 一 个 数据 正确 执行 ,对 同类 中 的 其 他 输入 也 能 
正确 执行 。 

(2) 如 果 函 数 ( 程 序 ) 对 某 一 复杂 度 的 输入 正确 执行 ,对 更 高 复杂 度 的 输入 也 能 正确 执 
行 。 例 如 ,需要 选择 字符 串 作为 输入 时 ,基于 本 假设 ,就 无 须 计 较 于 字符 串 的 长 度 。 除 非 字 
符 串 的 长 度 是 要 求 固 定 的 ,如 IP 地 址 字符 串 。 

在 面向 对 象 程序 中 ,类 成 员 函 数 通 常 都 很 小 ,功能 单一 ,函数 间 的 调用 频繁 ,容易 出 现 一 
些 不 宜 发 现 的 错误 。 例 如 : 

CD if (—1==write (fid, buffer. amount)) error_out(); 

该 语句 没有 全 面 检查 write() 的 返回 值 ,无意 中 断然 假设 了 只 有 数据 被 完全 写 入 和 没有 
写 人 两 种 情况 。 当 测试 也 忽略 了 数据 部 分 写 和 的 情况 ,就 给 程序 遗留 了 隐患 。 
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(2) 按 程序 的 设计 ,使 用 函数 strrchr() 查 找 最 后 的 匹配 字符 ,但 误 程序 中 写成 了 函数 
strchrO ,使 程序 功能 实现 时 查找 的 是 第 一 个 匹配 字符 。 

(3) 程序 中 将 if Gstmnemp(strl ,str2,strlen(strl1))) 误 写成 了 

f(strncemp(strl,str2,strlen(str2)))。 如 果 测 试用 例 中 使 用 的 数据 strl 和 str2 长 度 
一 样 ,就 无 法 检测 出 。 

因此 ,在 做 测试 分 析 和 设计 测试 用 例 时 ,应 该 注意 面向 对 象 程序 的 这 个 特点 ,仔细 地 进 
行 测试 分 析 和 设计 测试 用 例 , 尤 其 是 针对 以 函数 返回 值 作为 条 件 判 断 选 择 、 字 符 串 操作 等 
情况 。 

面向 对 象 编程 的 特性 使 得 对 成 员 函 数 的 测试 ,又 不 完全 等 同 于 传统 的 函数 或 过 程 测试 。 
尤其 是 继承 特性 和 多 态 特 性 ,使 子 类 继承 或 过 载 的 父 类 成 员 函 数 出 现 了 传统 测试 中 未 遇见 
的 问题 。Brian Marick 给 出 了 以 下 两 方面 的 考虑 。 

(1) 继承 的 成 员 函 数 是 否 都 不 需要 测试 ? 

对 父 类 中 已 经 测试 过 的 成 员 函 数 ,两 种 情况 需要 在 子 类 中 重新 测试 : 继承 的 成 员 函 
数 在 子 类 中 做 了 改动 ; @ 成 员 函 数 调 用 了 改动 过 的 成 员 函 数 的 部 分 。 

例如 ,假设 父 类 Bass 有 两 个 成 员 函 数 Inherited() 和 Redefined(), 子 类 Derived 只 对 
Redefined( ) 做 了 改动 。Derived:: Redefined() 显 然 需 要 重新 测试 。 对 于 Derived:: 
Inherited() ,如 果 它 有 调用 Redefined() 的 语句 (如 x 二 x/Redefined()), 就 需要 重新 测试 ; 
反之 ,无 此 必要 。 

(2) 对 父 类 的 测试 是 否 能 照搬 到 子 类 ? 

延 用 上 面 的 假设 ,Base: : RedefinedO I Derived: :Redefined() 已 经 是 不 同 的 成 员 函 数 ， 
它们 有 不 同 的 服务 说 明和 执行 。 对 此 , 照 理应 该 对 Derived: :Redefined() 重 新 测试 分 析 , 设 
计 测 试用 例 。 但 由 于 面向 对 象 的 继承 使 得 两 个 函数 有 相似 , 故 只 需 在 Base: :Redefined() 的 
测试 要 求 和 测试 用 例 上 添加 对 Derived: :Redfined() 新 的 测试 要 求 和 增补 相应 的 测试 用 例 。 
例如 ,Base: :Redefined() 含 有 如 下 语句 : 

If (value<0) message ("less"); 

else if (value == 0) message ("equal"); 

else message ("more"); 

Derived: :Redfined() 中 定义 为 

If (value<0) message ("less"); 

else if (value == 0) message ("It is equal"); 

else 

(message ("more"); 

if (value == 88)message("luck"); } 

在 原 有 的 测试 上 ,对 Derived: :Redfined() 的 测试 只 需 做 如 下 改动 : 将 value— = 0 的 测 
试 结果 期 望 改动 ; 增加 value= —88 的 测试 。 

多 态 有 几 种 不 同 的 形式 ,如 参数 多 态 ,包含 多 态 ,过载 多 态 。 包 含 多 态 和 过 载 多 态 在 面 
向 对 象 语言 中 通常 体现 在 子 类 与 父 类 的 继承 关系 ,对 这 两 种 多 态 的 测试 参见 上 述 对 父 类 成 
员 函 数 继承 和 过 载 的 论述 。 包 含 多 态 虽 然 使 成 员 函 数 的 参数 可 有 多 种 类 型 ,但 通常 只 是 增 
加 了 测试 的 繁杂 。 对 具有 包含 多 态 的 成 员 函 数 测试 时 ,只 需要 在 原 有 的 测试 分 析 和 基础 上 
扩大 测试 用 例 中 输入 数据 的 类 型 的 考虑 。 
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6. 面向 对 象 的 集成 测试 


传统 的 集成 测试 ,是 由 底 向 上 通过 集成 完成 的 功能 模块 进行 测试 ,一 般 可 以 在 部 分 程序 
编译 完成 的 情况 下 进行 。 而 对 于 面向 对 象 程序 ,相互 调用 的 功能 是 散布 在 程序 的 不 同类 中 ， 
类 通过 消息 相互 作用 申请 和 提供 服务 。 类 的 行为 与 它 的 状态 密切 相关 ,状态 不 仅 体现 在 类 
数据 成 员 的 值 ,也许 还 包括 其 他 类 中 的 状态 信息 。 由 此 可 见 ,类 相互 依赖 极其 紧密 ,根本 无 
法 在 编译 不 完全 的 程序 上 对 类 进行 测试 。 所 以 ,面向 对 象 的 集成 测试 通常 需要 在 整个 程序 
编译 完成 后 进行 。 此 外 ,面向 对 象 程序 具有 动态 特性 ,程序 的 控制 流 往往 无 法 确定 ,因此 也 
只 能 对 整个 编译 后 的 程序 做 基于 黑 盒 子 的 集成 测试 。 

面向 对 象 的 集成 测试 能 够 检测 出 相对 独立 的 单元 测试 无 法 检测 出 的 那些 类 相互 作用 时 
才 会 产生 的 错误 。 基 于 单元 测试 对 成 员 函 数 行为 正确 性 的 保证 ,集成 测试 只 关注 于 系统 的 
结构 和 内 部 的 相互 作用 。 面 向 对 象 的 集成 测试 可 以 分 成 两 步 进行 : 先进 行 静态 测试 ,再 进 
行动 态 测 试 。 

静态 测试 主要 针对 程序 的 结构 进行 ,检测 程序 结构 是 否 符合 设计 要 求 。 现 在 流行 的 一 
些 测 试 软件 都 能 提供 一 种 称 为 “可 逆 性 工程 ”的 功能 , 即 通 过 原 程序 得 到 类 关系 图 和 函数 功 
能 调用 关系 图 ,例如 ,International Software Automation 公司 的 Panorama-2 for Windows 95、 
Rational 公司 的 Rose C++ Analyzer 等 ,将 “可逆 性 工程 ?得 到 的 结果 与 OOD 的 结果 相 比 
较 , 检 测 程序 结构 和 实现 上 是 否 有 缺陷 。 换 句 话说 ,通过 这 种 方法 检测 OOP 是 否 达 到 了 设 
计 要 求 。 

动态 测试 设计 测试 用 例 时 ,通常 需要 上 述 的 功能 调用 结构 图 、 类 关系 图 或 者 实体 关系 图 
为 参考 ,确定 不 需要 被 重复 测试 的 部 分 ,从 而 优化 测试 用 例 , 减 少 测试 工作 量 ,使 得 进行 的 测 
试 能 够 达到 一 定 覆 盖 标 准 。 测 试 所 要 达到 的 覆盖 标准 可 以 是 : 达到 类 所 有 的 服务 要 求 或 服 
务 提 供 的 一 定 覆 盖 率 ; 依据 类 间 传 递 的 消息 ,达到 对 所 有 执行 线程 的 一 定 覆 盖 率 ; 达到 类 
的 所 有 状态 的 一 定 覆 盖 率 等 。 同 时 也 可 以 考虑 使 用 现 有 的 一 些 测试 工具 来 得 到 程序 代码 执 
行 的 覆盖 率 。 

有 具体 设计 测试 用 例 ,可 参考 下 列 步骤 。 

CD 选 定 检测 的 类 ,参考 OOD 分 析 结 果 ,确定 类 的 状态 和 相应 的 行为 ,类 或 成 员 函 数 间 
传递 的 消息 ,输入 或 输出 的 界定 等 。 

(2) 确定 覆盖 标准 。 

(3) 利用 结构 关系 图 确定 待 测 类 的 所 有 关联 。 

(4) 根据 程序 中 类 的 对 象 构造 测试 用 例 ,确认 使 用 什么 输入 激发 类 的 状态 、 使 用 类 的 服 
务 和 期 望 产生 什么 行为 等 。 

值得 注意 ,设计 测试 用 例 时 ,不 但 要 设计 确认 类 功能 满足 的 输入 ,还 应 该 有 意识 地 设计 
一 些 被 禁止 的 例子 ,确认 类 是 否 有 不 合法 的 行为 产生 ,如 发 送 与 类 状态 不 相 适 应 的 消息 ,要 
求 不 相 适 应 的 服务 等 。 根 据 具体 情况 ,动态 的 集成 测试 ,有 时 也 可 以 通过 系统 测试 完成 。 


7. 面向 对 象 的 系统 测试 


通过 单元 测试 和 集成 测试 , 仅 能 保证 软件 开发 的 功能 得 以 实现 ,但 不 能 确认 在 实际 运行 
时 , 它 能 满足 用 户 的 需要 ,是 否 大 量 存 在 实际 使 用 条 件 下 会 被 诱发 产生 错误 的 隐患 。 为 此 ， 
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对 完成 开发 的 软件 必须 经 过 规范 的 系统 测试 。 换 个 角度 说 ,开发 完成 的 软件 仅仅 是 实际 投 
入 使 用 系统 的 一 个 组 成 部 分 ,需要 测试 它 与 系统 其 他 部 分 配套 运行 的 表现 ,以 保证 在 系统 各 
部 分 协调 工作 的 环境 下 也 能 正常 工作 。 

系统 测试 应 该 尽量 搭建 与 用 户 实际 使 用 环境 相同 的 测试 平台 ,应 该 保证 被 测 系 统 的 完 
整 性 ,对 临时 没有 的 系统 设备 部 件 , 也 应 有 相应 的 模拟 手段 。 系 统 测试 时 ,应 该 参考 OOA 
分 析 的 结果 ,对 应 描述 的 对 象 . 属 性 和 各 种 服务 ,检测 软件 是 否 能 够 完全 “再 现 ” 问 题 空间 。 
系统 测试 不 仅 是 检测 软件 的 整体 行为 表现 ,从 另 一 个 侧面 看 ,也 是 对 软件 开发 设计 的 再 
确认 。 

这 里 说 的 系统 测试 是 对 测试 步骤 的 抽象 描述 。 它 体现 的 具体 测试 内 容 如 下 。 

CD 功能 测试 : 测试 是 否 满足 开发 要 求 ,是 否 能 够 提供 设计 所 描述 的 功能 ,是 否 用 户 的 
需求 都 得 到 满足 。 功 能 测试 是 系统 测试 最 常用 和 必需 的 测试 ,通常 还 会 以 正式 的 软件 说 明 
书 为 测试 标准 。 

(2) 强度 测试 : 测试 系统 的 能 力 最 高 实际 限度 , 即 软件 在 一 些 超 负荷 的 情况 下 功能 的 
实现 情况 。 如 要 求 软件 某 一 行为 的 大 量 重复 、 输 入 大 量 的 数据 或 大 数值 数据 、 对 数据 库 大 量 
复杂 的 查询 等 。 

(3) 性 能 测试 : 测试 软件 的 运行 性 能 。 这 种 测试 常常 与 强度 测试 结合 进行 ,需要 事先 
对 被 测 软件 提出 性 能 指标 ,如 传输 连接 的 最 长 时 限 、 传 输 的 错误 率 、 计 算 的 精度 .记录 的 精 
度 .响应 的 时 限 和 恢复 时 限 等 。 

(4) 安全 测试 : 验证 安装 在 系统 内 的 保护 机 构 确 实 能 够 对 系统 进行 保护 ,使 之 不 受 各 
种 非常 的 干扰 。 安 全 测试 时 需要 设计 一 些 测试 用 例 试 图 突破 系统 的 安全 保密 措施 ,检验 系 
统 是 否 有 安全 保密 的 漏洞 。 

(5) 恢复 测试 : 采用 人 工 的 干扰 使 软件 出 错 , 中 断 使 用 ,检测 系统 的 恢复 能 力 ,特别 是 
通信 系统 。 恢 复 测试 时 ,应 该 参考 性 能 测试 的 相关 测试 指标 。 

(6) 可 用 性 测试 : 测试 用 户 是 否 能 够 满意 使 用 。 具 体 体现 为 操作 是 否 方便 ,用 户 界面 
是 否 友 好 等 。 

(7) 安装 / 印 载 测试 等 。 

系统 测试 需要 对 被 测 的 软件 结合 需求 分 析 做 仔细 的 测试 分 析 ,建立 测试 用 例 。 


人 2 AOP 测试 


面向 方面 编程 (Aspect Orient Programming,AOP) 是 一 种 新 兴 的 编程 思想 , 它 能 够 提 
高 软件 的 模块 性 和 内 聚 性 ,降低 软件 的 复杂 度 ,为 软件 质量 的 提高 提供 了 一 个 新 的 途径 。 但 
是 ,并 不 能 保证 程序 员 不 犯错 误 ,而 且 它 本 身 也 不 提供 正确 性 验证 ,那么 开发 有 效 的 测试 方 
法 来 检验 AOP 的 正确 性 至 关 重 要 。 

AOP 是 一 种 关注 点 分 离 技术 , 它 运 用 方面 机 制 捕获 横 切 关注 点 ,将 分 散 的 应 用 组 成 单 
独 的 模块 ,有 效 地 解决 了 横 切 关注 点 造成 的 代码 交织 和 散布 问题 。 所 谓 横 切 关注 点 是 指 横 
跨 系统 各 个 对 象 层次 的 模块 ,但 与 它 所 跨越 的 对 象 代 码 在 功能 上 没有 相关 性 。 为 了 描述 和 
实现 Aspect 机 制 ,AOP 引入 了 一 些 新 的 构造 : 连接 点 (Joint Point) 是 程序 执行 中 明确 定义 
的 点 ,在 这 些 点 中 可 执行 Aspect 代码 ; 切入 点 (Pointcut) 是 捕获 .识别 程序 中 连接 点 的 结 
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构 , 是 通知 的 激发 条 件 , 它 决定 了 各 种 AOP 特征 将 如 何 被 运用 到 类 中 ; 通知 用 于 声明 在 切 
入 点 表达 式 中 定义 的 连接 点 被 调用 时 应 执行 的 动作 , 它 包括 Before, Around 以 及 After 三 
种 类 型 ; 导言 是 一 个 增加 方法 到 存在 类 中 的 途径 ; 方面 是 AOP 的 核心 ,类 似 于 OOP 中 类 
的 概念 ,是 把 切入 点 和 通知 封装 在 一 起 体现 横 切 关系 的 模块 单元 , 它 也 可 以 包含 方法 和 属 
性 、 从 其 他 类 或 方面 扩展 以 及 实现 接口 等 。 

与 面向 过 程 和 面向 对 象 语言 不 同 ,AOP 引入 了 一 些 新 的 语言 构造 ,如 连接 点 、 切 入 点 、 
导言 以 及 通知 等 ,它们 不 仅 改变 了 软件 的 开发 过 程 ,还 严重 影响 了 程序 的 状态 和 行为 (如 导 
言 可 以 把 一 些 新 方法 和 实例 变量 引入 核心 关注 点 中 ; 通知 则 能 够 为 类 引入 一 些 额外 的 不 可 
见 行为 ) ,从 而 导致 方面 和 类 之 间 的 交互 更 加 复杂 ,那么 传统 的 测试 方法 不 能 直接 应 用 到 
AOP 中 , 它 需要 开发 专门 的 测试 技术 和 方法 来 支持 这 些 特殊 构造 ,这 为 AOP 测试 带 来 了 
困难 。 

此 外 ,AOP 本 身 的 特性 问题 也 不 容 忽 视 : 首先 方面 没有 独立 的 实体 或 存在 物 ,它们 完 
全 依赖 其 他 一 些 类 的 上 下 文 ; 其 次 ,方面 的 实现 同 它们 的 织 入 上 下 文 紧密 关联 ; 再 者 ,方面 
或 类 代码 中 的 控制 和 数据 依赖 关系 不 明显 ; 最 后 就 是 特殊 的 织 入 过 程 可 能 还 会 产生 一 些 突 
发 行为 。 这 些 问 题 都 给 AOP 的 测试 带 来 了 困难 。 因 此 ,开发 适合 面向 方面 的 软件 测试 技 
术 是 AOP 的 一 项 迫切 而 艰巨 的 任务 。 


1. AOP 测试 方法 


AOP 作为 一 种 新 的 编程 范例 ,目前 还 缺乏 成 熟 的 测试 方法 。 下 面 主要 介绍 4 种 不 同 的 
测试 方法 ,它们 在 实现 上 各 有 其 特点 。 

1) 基于 错误 模型 的 系统 测试 方法 

任何 系统 测试 方法 都 是 针对 程序 中 出 现 过 的 一 些 错 误 类 型 ,如 果 对 于 错误 类 型 没有 任 
何 概念 ,那么 开发 的 系统 测试 方法 也 是 没有 意义 的 。AleKander、Bleman 和 Andrews 提出 
了 一 个 错误 模型 , 它 包括 6 种 类 型 的 错误 ,反映 了 AOP 与 面向 对 象 以 及 面向 过 程 截然 不 同 
的 特征 。 

CD 错误 的 切入 点 结构 约束 。 切 入 点 包含 识别 、 捕 捉 特 定 类 型 连接 点 的 表达 式 描述 。 
对 于 一 个 切入 点 p, 关 注 点 C 中 每 个 匹配 的 连接 点 1 将 被 织 入 一 个 与 p 关联 的 通知 。p 表达 
式 中 定义 的 匹配 函数 用 于 确定 被 选择 的 连接 点 。 如 果 定 义 的 匹配 函数 约束 过 强 , 一 些 必需 
的 连接 点 会 被 忽略 ; 如 果 约 东 太 弱 , 一 些 本 应 该 忽视 的 连接 点 将 被 捕获 。 以 上 任何 一 种 情 
况 都 很 可 能 造成 织 入 程序 的 错误 行为 ,这 也 是 AOP 中 最 明显 的 一 类 错误 。 

(2) 错误 的 方面 优先 级 。 在 面向 方面 程序 中 ,多 个 方面 有 可 能 同时 影响 一 个 连接 点 , 那 
么 通知 的 不 同 织 入 次 序 会 影响 系统 的 行为 。 在 这 种 情况 下 ,控制 通知 织 入 次 序 是 很 重要 的 ， 
它 可 以 通过 为 不 同 的 方面 指定 不 同 的 优先 级 来 确定 .高 优先 级 的 通知 能 够 被 优先 织 入 。 

(3) 未 能 建立 期 望 的 后 条 件 。 方 面 会 引起 类 代码 中 控制 流 的 改变 ,从 而 导致 类 不 能 实 
现 其 类 契约 的 后 条 件 。 而 其 使 用 者 希望 关注 点 能 根据 它们 的 契约 运行 ,不 管 通知 是 否 被 织 
入 ,方法 的 后 条 件 都 必须 满足 ,也 就 是 在 织 入 过 程 之 后 应 该 保留 关注 点 的 行为 契约 。 因 此 ， 
对 于 正确 的 行为 ,被 织 入 通知 必须 允许 核心 关注 点 的 方法 满足 其 后 条 件 。 然 而 ,在 所 有 可 能 
的 织 入 上 下 文 以 及 方面 组 合 中 定义 不 会 造成 行为 契约 违背 的 通知 是 一 个 困难 的 挑战 ,本 身 
也 是 一 个 极 可 能 的 错误 源 。 
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(4) 未 能 保存 状态 不 变 。 关 注 点 的 行为 是 根据 其 状态 的 物理 表示 以 及 作用 于 此 状态 上 
的 方法 来 定义 的 。 除 了 要 建立 方法 的 后 条 件 外 ,方法 也 必须 保证 其 状态 不 变量 的 保留 。 方 
面 的 通知 和 导言 能 够 为 关注 点 引入 新 的 状态 ,那么 要 保证 织 入 不 会 造成 状态 不 变量 的 违背 
也 是 一 个 艰难 的 挑战 ,同时 也 是 一 个 错误 的 来 源 。 

(5) 错误 的 控制 流 焦点 。 一 个 切入 点 表达 式 指 定 了 要 选择 的 连接 点 。 然 而 ,这 种 选择 
的 确定 不 仅 是 在 织 人 阶段 ,很 多 情况 取决 于 运行 时 期 。 因 此 ,要 诊断 出 由 于 运行 时 上 下 文 造 
成 的 错误 是 很 困难 的 。 

(6) 错误 的 控制 依赖 变更 。around 通知 能 够 为 方法 引入 新 的 分 支 控制 流 , 从 而 极 大 地 
改变 了 语句 之 间 的 依赖 ,因此 要 保证 程序 的 正确 执行 ,语句 之 间 的 依赖 关系 也 需要 测试 。 虽 
然 这 仅仅 是 一 个 理论 上 的 错误 模型 ,还 没有 形成 实际 完整 的 测试 方法 ,但 是 它 有 助 于 开发 测 
试 工具 以 及 确定 测试 粗 盖 策 略 和 标准 ,为 面向 方面 程序 的 系统 测试 做 出 了 重要 的 第 一 步 。 

2) 基于 状态 的 测试 方法 

从 面向 对 象 程序 的 FREE 测试 设计 模型 中 受到 启发 , Diahajang XU. Weifeng Xu 和 
Kendall Nygard 提出 了 一 种 基于 状态 的 测试 方法 。 它 的 基本 思想 是 : 首先 ,为 了 详细 说 明 
类 和 方面 的 状态 和 行为 ,把 类 的 FREE 模型 扩展 成 方面 状态 模型 ,然后 将 ASM 转化 成 一 棵 
转换 树 ,该 树 包 含 一 个 可 充分 测试 对 象 行为 以 及 
类 与 方面 之 间 交 互 的 测试 套件 。FREE 模型 是 面 
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向 对 象 软件 开发 使 用 的 一 种 状态 图 , 它 描述 了 对 
象 的 状态 和 动态 行为 ,并 提供 了 实现 的 指导 。 
ASM 模型 是 FREE 状态 模型 的 一 个 扩展 ,为 了 
表示 AOP 中 基本 的 语言 构造 一 一 连接 点 、 切 入 
点 和 通知 ,A 引 认 增 加 了 一 些 新 的 标志 。 图 4-3 
显示 了 一 个 ASM 例子 。 其 中 状态 A 表示 初始 状 
态 , 它 接受 一 个 具有 约束 条 件 [cond1]( 值 为 真 时 ) 


Before 
Advice 


[cond2] | 
Advice 
[cond3] 


B 


cond4] 
After 


MI1[condl] 


的 消息 MI 后 转 入 状态 B。 消息 MI 同时 受 三 个 Advice 
通知 影响 : 具有 约束 条 件 [Lcond2] 的 before 通知 
将 A 转 入 状态 C; 具有 约束 条 件 Lcond4] 的 after 
通知 将 A 转 入 状态 E; 具有 约束 条 件 Lcond3] 的 
Around 通知 将 A 转 入 状态 D. 

转换 树 测试 的 核心 思想 就 是 通过 一 定 的 算法 将 ASM 转变 成 一 棵 转换 树 ,然后 根据 从 
根 到 叶 节 点 的 每 条 路 径 所 表示 的 消息 序列 ,生成 相应 的 测试 套件 。 在 转换 树 中 ,每 条 从 根 到 
叶 节 点 的 路 径 表 示 检 验 对 象 行为 的 一 个 测试 需求 。 如 果 此 路 径 代表 的 消息 序列 上 的 变量 被 
指定 为 满足 相应 约 东 条 件 的 值 ,那么 这 个 测试 需求 就 变 成 了 一 个 具体 的 测试 用 例 。 

3) 基于 方面 流 图 的 测试 方法 

Weifeng Xu,Dianxiang Xu 和 Vivek Goel 等 人 提出 了 一 个 基于 方面 流 图 的 测试 方法 。 
该 方法 包括 : 首先 把 类 状态 模型 和 方面 状态 模型 合并 为 一 个 方面 域 状态 模型 (Aspect Scope 
State Model, ASSM) ; 然后 ,使 用 通知 和 方法 流 图 替换 ASSM 中 相应 的 类 与 方面 之 间 的 转 
化 以 及 对 应 的 动作 ,从 而 构造 一 个 方面 流 图 (Aspect Flow Graph. AFG); 此 外 ,根据 ASSM 
和 一 组 定 界 参数 连同 决定 行为 的 参数 关系 生成 一 棵 转换 树 ; 最 后 ,利用 AFG 和 转换 树 , 产 


E 


图 4-3 ASM 的 例子 
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生 一 个 基于 代码 的 可 运行 测试 套件 。 

方面 域 状态 模型 ASSM 的 构造 是 通过 合并 以 下 两 个 状态 模型 完成 的 。 

(1) 类 状态 模型 : 它 描述 了 特定 类 的 状态 转换 行为 。 

(2) 方面 状态 模型 : 如 图 4-4 所 示 , 它 包括 4 个 状 dl 
di, a 状态 和 es 状态 分 别 对 应 方面 的 入 口 和 出 口 ; 其 他 (Ca -| Aetion 
两 个 状态 依次 称 为 Action Prior 和 Action Posterior, Prior 
此 外 ,方面 还 包括 before 通知 、after 通知 以 及 类 的 
arbltrary 动作 ,它们 是 方面 中 的 特定 动作 。 其 中 ， 
before 通知 将 方面 中 的 状态 从 a 状态 转变 到 Action 


Prior 状态 ; 而 after 通知 将 其 从 Action Posterior 转变 Aai 
到 se 状态 ; arbltrary 动作 则 将 状态 从 Action Prior Æ C 一 一 Posterior 
化 到 Action Posterior。 构 造 算法 的 基本 思想 是 检查 
类 状态 模型 中 边 表 示 的 每 个 动作 ,该 动作 对 应 类 中 一 
个 定义 良好 的 连接 点 。 如 果 它 被 方面 中 的 一 个 切入 点 ddl loli 
捕获 ,那么 使 用 相应 的 方面 状态 模型 取代 此 边 。 

方面 流 图 类 似 类 流 图 , 仅 有 的 差别 在 于 AFG 也 可 以 表示 由 方面 引入 的 控制 流 。 它 是 
通过 合并 ASSM 以 及 方法 和 通知 流 图 构造 的 。 具 体 来 说 ,ASSM 中 任何 导致 方面 状态 改变 
的 动作 (通知 和 方法 ) 都 被 相应 的 通知 和 方法 流 图 替换 。AFG 不 仅 显 示 了 运行 时 通知 
(before 和 after) 是 如 何 被 附加 到 一 个 选中 的 连接 点 上 ,也 展示 了 类 行为 是 如 何 受 附加 的 通 
知 影响 。 转 换 树 显示 了 所 有 可 能 的 状态 转换 序列 ,根据 这 些 序列 就 可 以 生成 满足 数据 流 覆 
盖 标 准 的 测试 用 例 。 

4) 其 于 数据 流 的 单元 测试 方法 

lanjun Zhao 提出 一 个 基于 数据 流 的 AOP 单元 测试 方法 。 该 方法 测试 AOP 中 的 两 类 
单元 : 方面 ,程序 横 切 实现 的 模块 化 单元 ; O38 ,行为 受 一 个 或 多 个 方面 影响 。 它 使 用 控 
制 流 图 来 寻找 被 测试 单元 的 def-use 对 ,然后 利用 此 信息 指导 选择 测试 用 例 。 

“单元 测试 "的 意思 就 是 测试 程序 的 每 个 单元 (基本 组 件 ), 从 而 检验 单元 的 详细 设计 是 
和 否 正 确实 现 。 然 而 , 它 在 AOP 中 的 含义 更 难 理解 。 由 于 方面 可 以 打破 类 的 封装 ,那么 类 不 
再 被 认为 是 一 个 良好 封装 的 内 聚 单元 。 此 外 ,一 个 类 可 能 受 多 个 方面 的 影响 而 一 个 方面 也 
可 能 影响 多 个 类 ,方面 与 类 之 间 的 交互 也 变 得 很 复杂 。 因 此 ,单独 测试 AOP 中 的 类 和 方面 
是 不 现实 的 ,应 该 测试 方面 时 连同 那些 其 行为 受 通 知 影响 的 方法 (从 方面 角度 ); 四 测试 
类 时 连同 那些 能 影响 该 类 行为 的 通知 以 及 能 引入 新 成 员 到 该 类 中 的 导言 (从 类 角度 ) 。 

为 了 能 正确 地 测试 方面 和 类 ,将 AOP 分 为 以 下 5 类 。 

(1) 聚集 方面 。 它 是 单个 方面 连同 一 个 或 多 个 类 中 的 方法 ,这 些 方法 受 方面 中 通知 的 
影响 ,表示 为 caspect。 

(2) 聚集 类 。 它 是 单个 类 连同 一 个 或 多 个 方面 中 的 通知 或 导言 ,通知 影响 类 方法 的 行 
为 ,而 导言 改变 类 的 类 型 结构 ,表示 为 c-class。 

(3) 聚集 方法 。 它 是 单个 方法 连同 一 个 或 多 个 影响 其 行为 的 通知 ,表示 为 cmethod。 

OD 正常 类 。 它 是 单个 类 ,行为 不 受 任何 方面 的 影响 ,表示 为 n-class。 

CD 正常 方法 。 它 是 单个 方法 ,不 受 任何 通知 影响 ,表示 为 n-method。 


arbitrary 


action 
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以 上 每 类 的 流 图 是 单独 构造 并 且 其 测试 方法 也 是 分 开 执 行 的 。 

c-aspect 和 c-class 流 图 的 构造 过 程 分 为 以 下 三 步 。 

第 一 步 , 构 造 caspect 和 c-class 的 调用 图 。 它 是 一 个 有 向 图 ,表示 c-aspect 和 c-class 
中 各 模块 之 间 的 调用 关系 。 对 于 c-aspect 来 说 ,其 顶点 表示 组 成 caspect 的 模块 ,它们 可 以 
是 行为 受 方面 影响 的 cmethod 通知 或 n-method。 边 表示 c-aspect 中 模块 间 的 调用 次 序 。 

第 二 步 ,使 用 专用 顶点 (包括 框架 入 口 顶点 (Frame Entry Vertex)、 框 架 循环 顶点 
(Frame Loop Vertex) ,框架 出 口 顶 点 (Frame Loop Vertex) ,框架 返回 顶点 (Frame Return 
Vertex) 和 框架 调用 顶点 (Frame Call Vertex) ) 来 构造 c-aspect 或 c-class 的 框架 ,并 将 其 插 
入 对 应 的 调用 图 中 。 此 框架 表示 c-aspect 或 c-class 的 测试 驱动 , 它 可 以 模拟 c-aspect 或 
c-class 中 某 些 模块 间 的 任意 调用 顺序 ,支持 对 c-aspect 或 c-class 的 数据 流 分析 。 

第 三 步 ,用 模块 的 控制 流 图 替换 调用 图 中 的 相应 顶点 。 三 步 产生 的 结果 就 是 一 个 称 为 
框架 式 控 制 流 图 (Framed Control Flow Graph) 的 c-aspect 图 。c-class 的 FCFG 构造 方法 
类 似 。 

对 于 每 个 待 测试 的 类 或 方面 ,此 方法 执行 一 个 三 层 测 试 策略 。 

CD 模块 内 测试 。 仅 测试 单个 模块 。 对 于 c-aspect, 其 模块 可 以 为 一 个 cmethod、 
n-method 或 c-aspect 的 导言 ; 对 于 c-class. 其 模块 可 以 是 c-class 的 一 个 n-method 或 
c-method。 它 只 检验 模块 体内 出 现 的 def-use 对 。 

(2) 模块 间 测 试 。 测 试 一 个 公共 模块 连同 其 在 一 个 方面 或 类 中 直接 或 间接 调用 的 其 他 
一 些 模块 。 它 要 测试 涉及 多 个 模块 的 def-use 对 。 

(3) 方面 内 /类 内 测试 。 检 验 那些 可 以 在 方面 或 类 外 被 访问 并 能 够 被 方面 或 类 的 使 用 
者 以 任意 次 序 调用 的 模块 。 不 同 的 调用 次 序 将 检验 不 同 的 def-use 对 。 


2. AOP 测试 方法 的 对 比分 析 


下 面 简单 地 总 结 各 个 测试 方法 的 特点 ,同时 使 用 错误 模型 比较 各 方法 的 测试 性 能 。 

(1) 基于 状态 的 测试 方法 捕获 方面 对 类 状态 模型 的 影响 。 它 运用 转换 树 来 测试 AOP 
中 的 所 有 路 径 ,能 够 达到 N 十 的 测试 覆盖 率 。 它 可 以 显示 程序 中 所 有 的 状态 控制 错误 、 潜 
在 路 径 以 及 许多 误 用 的 状态 错误 。 同 时 ,该 方法 还 可 以 反映 错误 模型 中 的 两 类 错误 一 一 错 
误 的 切入 点 结构 约束 和 未 能 保存 状态 不 变量 。 然 而 ,此 方法 经 常会 遇 到 状态 爆炸 的 问题 , 因 
此 ,如 何 确定 最 感 兴趣 或 最 重要 的 路 径 是 值得 研究 的 下 一 步 工作 。 

(2) 基于 方面 流 图 的 测试 方法 构造 方面 流 图 来 描述 方面 与 类 之 间 的 交互 。 这 有 助 于 运 
用 多 种 白 盒 测试 方法 以 及 测试 覆盖 标准 ,而 且 如 果 类 代码 已 经 被 测试 ,那么 只 要 把 注意 力 集 
中 在 由 方面 引入 的 新 行为 和 交互 上 ,就 可 以 重用 类 的 测试 用 例 并 且 能 够 更 多 地 降低 测试 成 
本 。 此 外 ,该 方法 还 可 以 检测 错误 模型 中 的 一 类 错误 一 一 错误 的 控制 依赖 变更 。 

(3) 基于 数据 流 的 单元 测试 方法 通过 组 合 单元 测试 和 数据 流 测 试 技术 来 检验 AOP 中 
的 类 和 方面 。 它 没有 针对 任何 特定 的 错误 类 型 ,但 能 反映 错误 模型 中 的 第 4 类 错误 一 一 未 
能 保存 状态 不 变量 ,因为 状态 错误 通常 是 与 错误 的 数据 流 相关 的 。 不 过 ,该 方法 只 针对 方面 
和 类 本 身 ,没有 考虑 其 集成 测试 问题 ,也 没有 考虑 检验 扩展 类 和 方面 的 测试 方法 。 

表 4-1 总 结 了 三 个 测试 方法 与 错误 类 型 之 间 的 关系 。 由 此 可 以 得 出 : 已 提出 的 测试 方 
法 只 针对 AOP 中 出 现 的 局 部 错误 类 型 ,测试 覆盖 面 太 窜 ,检验 效率 不 高 ,缺乏 全 面 的 考虑 。 
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AOP 测试 技术 要 不 断 发 展 ,必须 要 在 测试 方法 的 深度 和 广度 上 进行 研究 。 
表 4-1 测试 方法 与 错误 类 型 之 间 的 关系 
基于 状态 的 测试 基于 方面 流 图 的 测试 基于 数据 流 的 单元 测试 


| 
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6.3 SOA 测试 


面向 服务 软件 架构 (Service Oriented Architecture,SOA) 是 一 种 新 型 的 软件 架构 思想 ， 
同 面向 对 象 思想 的 出 现 一 样 , 带 来 了 对 软件 测试 的 新 的 挑战 。SOA 在 更 高 的 层次 上 实现 了 
软件 复 用 和 封装 ,通过 业务 流程 的 方式 将 原来 独立 的 软件 应 用 系统 结合 在 一 起 共同 完成 一 
系列 的 功能 ,这 极 大 地 方便 了 企业 信息 整合 。 但 是 ,这 种 方便 带 来 的 测试 量 是 巨大 的 ,测试 
的 方法 和 侧重 点 也 与 单个 软件 应 用 系统 有 很 大 的 区 别 。 

SOA 是 一 种 架构 模型 , 它 可 以 根据 需求 通过 网 络 对 松散 耦合 的 粗 粒 度 应 用 组 件 进行 分 
布 式 部 署 、 组 合 和 使 用 。 服 务 层 是 SOA 的 基础 ,可 以 直接 被 应 用 调用 ,从 而 有 效 控制 系统 
中 与 软件 代理 交互 的 人 为 依赖 性 。SOA 本 质 上 是 服务 的 集合 。 服 务 间 彼此 通信 ,这 种 通信 
可 能 是 简单 的 数据 传送 ,也 可 能 是 两 个 或 更 多 的 服务 协调 进行 某 些 活动 ,服务 间 需 要 某 些 方 
法 进行 连接 。 而 所 谓 服 务 就 是 精确 定义 \ 封 装 完善 ,独立 于 其 他 服务 所 处 环境 和 状态 的 
函数 。 

SOA 同 面 向 对 象 概念 有 一 个 共同 目的 ,就 是 为 了 提高 软件 复 用 的 程度 。 面 向 对 象 的 软 
件 采用 了 信息 隐藏 .封装 和 继承 ` 多 态 和 动态 绑 定 等 技术 ,这些 都 为 软件 测试 带 了 新 的 课题 。 
SOA 通过 将 单个 系统 中 某 种 业务 处 理 封装 为 服务 ,实现 了 在 更 高 层次 上 的 软件 复 用 ,信息 
更 加 隐藏 。 同 时 SOA 作为 一 个 体系 架构 而 不 是 一 款 应 用 软件 ,其 复杂 性 不 是 单一 应 用 软 
件 可 以 比拟 的 。 


1. 面向 服务 架构 对 软件 测试 的 影响 


SOA 测试 的 三 个 维度 包括 服务 .进程 和 性 能 。 

1) 服务 测试 

服务 级 测试 是 最 重要 的 ,因为 核心 服务 是 SOA 的 基础 。 然 而 ,各 种 服务 在 编写 方面 彼 
此 之 间 差 别 很 大 ,因为 它们 的 开发 者 是 不 同 的 ,有 些 服务 粒度 也 许 比较 粗 ,而 有 些 服务 可 能 
会 很 细 , 还 有 一 些 服务 则 可 能 设计 粗 劣 ,还 有 些 服务 也 许 会 建立 在 现 有 界面 和 API 上 ,因此 
它们 就 更 加 复杂 ,更 需要 进行 质量 保证 试验 ,因为 需要 在 一 个 中 间 层 之 外 再 加 一 个 中 间 层 。 
这 其 中 并 没有 什么 技巧 ,主要 就 是 验证 各 项 服务 的 用 途 、 界 面 功 能 是 否 正 确 以 及 验证 
WSDL 和 规划 等 内 容 。 另 外 ,还 要 考虑 design-time 和 run-time 的 诊断 情况 ,确保 解决 那些 
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重要 的 概念 、 功 能 和 回归 测试 。 服 务 测试 相当 于 单元 测试 ,在 这 个 阶段 ,需要 对 服务 接口 、 局 
部 数据 结构 的 完整 性 ,边界 条 件 、 覆 盖 条 件 和 出 错 处 理 等 进行 测试 。 

2) 业务 流程 测试 

除了 服务 级 测试 之 外 ,还 必须 测试 服务 被 加 入 到 业务 流程 中 和 混合 应 用 中 的 方式 。 
为 这 些 一 般 都 是 以 服务 本 身 的 方式 显示 出 来 的 ,这 只 是 对 核心 服务 以 及 服务 调节 单位 和 系 
统 关系 的 整个 进程 的 另 一 个 级 别 的 测试 。 这 与 测试 面向 对 象 式 系统 非常 相似 ,但 是 这 些 系 
统 有 异 构 开 发 以 及 runtime 平台 ,因此 复杂 性 更 强 。 业 务 流 程 测 试 相 当 于 集成 测试 /系统 
测试 。 在 这 个 阶段 ,可 以 根据 业务 流程 的 特点 ,观察 系统 级 的 输入 和 输出 是 否 符合 预期 。 

3) 基础 设施 测试 

SOA 的 实施 除了 需要 具体 的 应 用 软件 系统 提供 的 服务 外 ,还 需要 一 系列 的 基础 设施 才 
能 正常 运行 ,这 些 基础 设施 一 般 包括 服务 注册 和 发 现 系统 (一 般 为 UDDD 、 授 权 系统 等 。 这 
些 系统 也 是 以 独立 的 接口 提供 服务 ,需要 进行 服务 测试 。 由 于 这 些 系 统 只 有 在 业务 流程 中 
才能 真正 发 挥 作用 ,也 需要 将 其 放 在 业务 流程 中 进行 测试 。 

基础 设施 类 似 于 一 般 软 件 应 用 系统 中 调用 的 API、SDK。 但 是 ,由 于 SOA 的 应 用 针对 
性 很 强 , 不 同 的 SOA 架构 基础 设施 不 可 能 完全 一 样 , 如 授权 系统 ,由 于 涉及 的 系统 不 同 , 不 
同 的 SOA 之 间 肯 定 存在 差异 ,所 以 在 测试 时 不 能 假定 基础 设施 的 正确 性 ,必须 进行 测试 。 

4) 性 能 测试 

性 能 测试 也 很 重要 ,SOA 是 一 个 松散 耦合 的 系统 架构 ,其 中 业务 流程 通过 调用 不 同 软 
件 应 用 系统 提供 的 服务 完成 ,这 些 应 用 系统 本 身 的 性 能 可 能 因为 设计 或 被 分 配 计算 、 处 理 任 
务 的 多 寒 而 差别 很 大 ,一 个 应 用 系统 的 处 理 速 度 慢 会 造成 整个 SOA 系统 架构 的 瓶颈 。 
SOA 的 大 部 分 质量 问题 都 跟 性 能 有 关 。SOA 中 的 性 能 测试 就 是 对 服务 .构成 .业务 流程 和 
系统 等 不 同 级 别 的 测试 问题 。 在 测试 系统 的 整体 性 能 时 ,必须 沿 着 体系 结构 对 数据 流 图 中 
最 高 层 到 最 底层 进行 分 解 , 找 出 系统 中 存在 问题 的 组 件 。 

SOA 中 的 服务 可 能 封装 了 普通 应 用 软件 系统 中 的 一 系列 处 理 过 程 ,如 移动 提供 的 短信 
发 送 服务 就 可 能 封装 了 用 户 认证 . 欠 费 查询 .短信 发 送 . 计 费 等 多 个 模块 ,而 业务 流程 由 于 集 
成 了 大 量 服务 ,性 能 方面 可 能 暴露 的 问题 更 大 。 有 实验 数据 表明 ,SOA 的 性 能 在 目前 情况 
下 可 能 只 相当 于 不 采用 SOA 时 的 10%, 所 以 性 能 测试 对 于 SOA 应 用 的 意义 超过 了 以 前 任 
何 一 种 软件 测试 。 通 过 性 能 测试 ,可 以 找到 瓶颈 服务 从 而 对 其 进行 调 优 ,也 可 以 根据 各 个 组 
成 服务 的 性 能 特点 在 保证 处 理 罗 辑 的 情况 下 对 业务 流程 进行 调 优 ,这 些 都 会 带 来 SOA 性 
能 的 极 大 提高 。 


2. SOA 测试 技术 


1) 服务 的 功能 性 测试 

SOA 中 的 业务 通过 组 合 多 个 应 用 软件 系统 提供 的 服务 而 形成 ,从 SOA 的 范畴 来 看 , 服 
务 是 组 成 SOA 业务 流程 的 有 机 模块 ,对 服务 的 测试 相当 于 单元 测试 ,但 是 从 服务 对 应 的 应 
用 系统 来 说 ,一 个 服务 可 能 通过 调用 应 用 的 多 个 模块 而 完成 了 一 系列 的 功能 ,对 服务 的 测试 
除了 对 服务 本 身 输入 输出 的 正确 性 ( 黑 盒 ) 进 行 测试 外 ,还 应 该 包括 更 深层 次 对 服务 所 涉及 
的 应 用 软件 系统 模块 进行 测试 ,在 这 个 意义 上 ,对 SOA 中 具体 服务 的 测试 实际 上 是 对 提供 
服务 的 应 用 软件 系统 与 该 服务 相关 的 部 分 进行 集成 测试 。 
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具体 说 来 ,对 服务 的 功能 性 测试 主要 包括 以 下 几 个 方面 。 

(1) 输入 有 效 性 测试 

由 于 服务 调用 同 函数 调用 类 似 . 但 也 有 着 很 大 不 同 ,函数 调用 如 果 输 入 错误 的 参数 类 型 
或 参数 个 数 ,在 编译 时 一 般 就 能 被 编译 器 发 现 。 而 服务 一 般 采用 远程 调用 方式 ,其 参数 通过 
某 种 规范 的 方式 发 布 出 来 ,但 是 没有 很 好 的 外 在 机 制 发 现 调用 者 的 非法 调用 ,这 就 需要 服务 
本 身 提供 较 强 的 错误 发 现 能 力 。 这 种 能 力也 加 大 了 输入 有 效 性 测试 的 任务 。 一 般 测 试 的 内 
容 包 括 参 数 类 型 参数 个 数 测试 ,同时 对 于 一 些 特定 的 服务 调用 方式 ,如 以 Web Services Jr 
式 发 布 的 服务 ,还 存在 字符 编码 测试 等 。 

(2) 输入 边界 值 测 试 

边界 值 是 软件 最 容易 出 现 错误 的 地 方 , 对 于 服务 来 说 也 是 测试 重点 。 

2) 业务 流程 分 析 和 测试 

业务 流程 是 SOA 实现 具体 功能 的 有 机 单元 ,对 其 的 测试 可 以 采用 类 似 传 统 软件 测试 
中 的 数据 流 分 析 和 测试 的 方法 。 一 个 业务 流程 中 可 能 存在 多 个 分 支 , 测 试 需要 保证 每 个 分 
支 都 能 被 充分 测试 到 。 下 面 从 几 个 方面 来 说 明 。 

CD 测试 用 例 的 设计 

业务 流程 是 一 个 抽象 的 概念 ,从 本 质 上 说 , 它 定 义 了 服务 调用 的 次 序 、 约 束 条 件 以 及 输 
入 值 等 ,从 这 个 概念 上 说 ,业务 流程 与 面向 对 象 方法 中 的 类 相似 。 对 应 地 ,由 于 对 象 是 类 的 
实例 化 , 受 测试 的 也 是 具体 的 对 象 。 在 对 业务 流程 的 测试 中 ,也 需要 定义 一 个 对 应 的 测试 实 
例 , 即 测试 用 例 。 

设计 测试 用 例 主 要 内 容 是 设计 测试 的 输入 条 件 ,使 得 最 终 得 到 的 测试 用 例 集 可 以 覆盖 
业务 流程 的 每 个 分 支 。 由 于 业务 流程 有 着 比较 明确 的 定义 (如 使 用 BPEL 定义 的 BP). HH 
前 来 说 其 逻辑 结构 不 算 很 复杂 ,做 到 路 径 的 全 覆盖 不 是 太 难 。 但 是 由 于 业务 流程 中 有 的 分 
支 被 调用 的 约束 条 件 部 分 来 自 于 前 驱 服 务 的 调用 结果 ,这 就 需要 对 每 个 服务 的 输入 输出 进 
行 分 析 , 从 而 设计 出 有 效 的 覆盖 输入 。 

(2) 测试 结果 的 分 析 

同 传统 的 测试 一 样 ,集成 测试 结果 不 一 定 就 是 数据 输出 ,有 可 能 是 GUI 上 的 某 个 标志 ， 
也 可 能 只 是 内 部 状态 的 一 个 改变 。 在 SOA 的 业务 流程 测试 中 .这 种 情况 更 是 发 挥 了 极致 , 
一 个 业务 流程 测试 流程 的 执行 会 造成 参与 此 业务 的 各 个 应 用 软件 系统 的 状态 的 改变 。 一 个 
结果 的 正确 与 否 不 能 仅 判 断 流程 中 最 后 一 环 的 正确 执行 与 否 ,而 是 需要 去 分 析 参 与 此 业务 
流程 的 各 个 应 用 软件 系统 的 运行 状态 。 这 需要 在 设计 测试 用 例 的 时 候 就 要 预测 到 各 个 系统 
状态 的 预期 值 。 

3) 基础 架构 测试 

前 面 已 经 提 到 过 ,基础 架构 是 SOA 得 以 运行 的 必 备 组 件 。 这 一 块 的 测试 必须 针对 每 
一 个 具体 实施 来 进行 ,不 存在 移植 后 就 不 需 测 试 的 侥幸 。 例 如 授权 系统 , 当 每 一 个 新 的 应 用 
系统 加 入 这 个 架构 ,都 必须 进行 重新 测试 ,即使 这 个 新 的 应 用 系统 采用 的 是 同 原 有 系统 中 相 
同 的 认证 方式 ,因为 对 其 的 测试 不 仅 是 测试 服务 和 业务 流程 本 身 , 也 是 对 新 系统 提供 的 服务 
接口 的 测试 。 

对 基础 架构 的 测试 也 可 分 为 服务 测试 和 业务 流程 测试 两 块 。 前 者 测试 基础 架构 作为 一 
个 单独 系统 的 功能 完整 性 ,后 者 则 是 业务 流程 中 必 不 可 少 的 一 个 测试 条 件 。 
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4) 性 能 测试 

性 能 是 SOA 发 展 道路 上 的 一 大 障碍 ,SOA 提供 了 灵活 的 业务 组 合 机 制 以 及 通用 的 服 
务 调用 方式 (如 Web Service) ,但 是 带 来 的 牺牲 之 一 便 是 性 能 的 下 降 。SOA 性 能 测试 的 目 
的 性 很 强 , 一 是 发 现 性 能 瓶颈 ,从 而 对 瓶颈 部 分 进行 调 优 ; 二 是 对 业务 流程 的 逮 辑 结构 进行 
调 优 ,从 而 提高 整体 性 能 。 从 性 能 测试 来 说 可 以 包括 以 下 几 个 方面 。 

CD 服务 性 能 测试 

通过 对 单个 服务 的 压力 测试 ,可 以 知道 此 服务 的 最 大 负载 .响应 时 间 等 参数 ,从 而 作为 
以 后 判断 瓶颈 的 依据 。 

(2) 网 络 流量 测试 

由 于 SOA 是 针对 具体 的 环境 进行 实施 ,要 能 预测 要 实施 地 点 的 实际 网 络 带宽 ,通过 测 
试 业务 相互 调用 的 流量 测试 ,尽量 将 大 流量 的 调用 放 在 带宽 较 大 的 地 点 ,而 对 于 较 远 程 的 调 
用 则 尽量 采用 各 种 减 小 流量 的 方法 ,如 数据 库 采用 存储 过 程 XML 采用 压缩 等 方法 。 

(3) 业务 流程 性 能 测试 

通过 测试 业务 流程 的 单位 时 间 执 行 次 数 ,并 根据 其 中 业务 逻辑 和 对 服务 性 能 测试 的 结 
果 判 断 出 瓶 贷 ,如 果 瓶 颈 服 务 可 以 调 优 则 对 其 进行 优化 ,如 果 由 于 某 些 原因 (业务 系统 不 能 
动 或 是 开发 人 员 的 离开 ) 无 法 对 单个 服务 进行 优化 , 则 需要 对 业务 的 逻辑 进行 优化 ,如 通过 
任务 的 调度 ,将 瓶颈 服务 从 关键 路 径 中 调 离 转 为 并 发 (如 果 可 以 的 话 ) 。 

(4) 服务 器 ,服务 器 软件 等 外 围 条 件 测试 

服务 的 发 布 和 调用 一 般 由 专用 的 服务 器 软件 完成 ,如 Web Service 可 以 通过 IBM 公司 
的 Web Sphere, BEA 公司 的 WebLogic 或 是 开源 的 Tomcat 来 发 布 ,这 些 服务 器 软件 的 执 
行 性 能 各 不 相同 ,在 选用 时 需要 对 其 进行 一 些 测试 ,了 解 其 性 能 中 的 并 发 数 、 响 应 时 间 等 具 
体 参 数 , 结 合 需要 的 实施 的 SOA 的 具体 情况 进行 选择 。 同 时 服务 器 的 性 能 也 是 一 个 重要 
指标 ,往往 瓶颈 的 出 现 不 是 因为 软件 的 问题 而 是 应 用 服务 器 出 了 问题 。 


(gsm 


.面向 对 象 的 软件 测试 包括 哪 几 种 ? 

. AOP 测试 的 方法 有 哪 几 种 ? 

. 什么 是 SOA? 

. SOA 测试 包括 哪 三 个 维度 ? 各 是 什么 内 容 ? 
. SOA 测试 技术 包括 哪 几 个 方面 ? 

.举例 说 明 如 何 进行 面向 对 象 分 析 的 测试 。 
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自动 化 测试 


自动 化 测试 是 把 以 人 为 驱动 的 测试 行为 转化 为 机 器 执行 的 一 种 过 程 。 通 常 ,在 设计 了 
测试 用 例 并 通过 评审 之 后 ,由 测试 人 员 根 据 测试 用 例 中 描述 的 规程 来 一 步 步 执行 测试 ,得 到 


实际 结果 与 期 望 结 果 的 比较 。 在 此 过 程 中 ,为 了 节省 人 力 、 时 间或 硬件 资源 ,提高 测试 效 
便 引 入 了 自动 化 测试 的 概念 。 


本 章 学 习 重 点 
了解 自动 化 测试 的 优点 。 
+ 掌握 自动 化 测试 的 基本 原则 。 


。 熟悉 自动 化 测试 的 实现 基本 策略 。 
* 了解 手工 测试 和 自动 化 测试 的 差异 。 


本 章 学 习 难 点 
热 悉 自 动 化 测试 的 实现 基本 策略 。 


5.1 自动 化 测试 的 优点 


P 


1. 回归 测试 ,降低 测试 成 本 
对 于 产品 型 的 软件 或 生命 周期 长 的 项 目 ,经 常会 有 新 功能 的 开发 或 需求 的 变动 ,对 了 


率 ， 
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发 布 的 软件 功能 ,大 部 分 都 和 上 一 个 版 本 相近 或 相同 ,这 些 功 能 如 果 在 上 一 个 版 本 之 前 已 经 
实现 了 自动 化 测试 ,那么 新 发 布 的 版 本 中 ,这 部 分 功能 就 可 以 自动 化 测试 实现 ,避免 了 重复 


测试 的 成 本 ,也 确保 了 软件 的 质量 。 
2. 提高 测试 效率 


一 些 测试 用 例 手工 测试 是 比较 烦琐 的 ,例如 话 单 或 协议 字段 的 检查 ,如 果 是 人 工 检查 将 是 


一 件 既 烦琐 又 耗 时 还 容易 出 错 的 工作 ,如 果 是 自动 化 测试 ,测试 就 会 变 得 轻松 和 容易 很 多 。 


对 于 检查 点 很 多 的 测试 用 例 ,如 果 手 工 执行 一 步 都 需要 停 下 来 检查 好 几 个 复杂 的 检查 
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点 ,测试 的 效率 自然 非常 低 ,使 用 自动 化 测试 ,设置 好 了 输入 条 件 和 预期 结果 ,只 要 单 击 按钮 
运行 一 下 脚本 就 知道 了 复杂 的 测试 结果 。 


3. 易于 发 现 软件 的 改动 


自动 化 测试 脚本 可 以 重复 执行 ,容易 发 现 软件 的 任何 变动 。 例 如 修复 了 一 个 TR 后 , 引 
起 原 功能 的 改动 ,执行 相同 的 脚本 ,可 以 通过 测试 轻易 发 现 问题 。 


4. 充分 利用 资源 


自动 化 测试 可 以 不 需要 人 在 现场 的 情况 下 自动 执行 ,发布 了 一 个 新 版 本 的 软件 后 ,可 以 
在 白天 的 上 班 时 间 进 行 新 功能 的 手工 测试 , 原 有 功能 的 自动 化 测试 可 以 在 晚上 或 周末 执行 ， 
第 二 天 上 班 就 可 以 看 到 执行 的 结果 。 这 样 充分 利用 时 间 资 源 , 提 高 测试 的 效率 ,也 避免 了 开 
发 和 测试 之 间 的 等 待 。 


5. 性 能 测试 


在 一 些 压力 大 的 性 能 测试 中 ,人 工 是 很 难 模拟 的 。 在 没有 引入 自动 化 测试 工具 之 前 ,为 
了 测试 并 发 ,研发 中 心 再 加 上 公司 的 其 他 部 门 上 千 人 在 研发 经 理 的 口令 “1 一 ,2 一 、31” 的 号 
召 下 ,大 家 同时 单 击 同一 个 按钮 。 这 样 的 测试 ,虽然 是 模拟 了 并 发 ,但 需要 消耗 相当 大 的 成 
本 , 想 要 测试 一 次 也 不 容易 。 

在 性 能 测试 中 使 用 自动 化 测试 ,可 以 轻易 模拟 并 发 ,为 性 能 压力 测试 提供 了 更 好 的 方法 。 


6. 将 精力 投入 更 有 意义 的 测试 


自动 化 测试 减轻 了 很 多 重复 的 工作 ,测试 工程 师 有 更 多 的 时 间 去 思考 如 何 提高 软件 的 
质量 ,制定 详细 的 测试 计划 ,精心 设计 测试 用 例 ,构建 更 复杂 的 测试 。 

自动 化 测试 的 好 处 有 很 多 ,但 并 不 意味 着 自动 化 测试 可 以 取代 手工 测试 ,也 不 意味 着 任 
何 的 系统 都 适合 自动 化 测试 。 自 动 化 测试 的 意义 并 不 是 取代 人 在 测试 中 的 位 置 ,而 是 将 人 
从 重复 烦琐 的 工作 中 解放 出 来 ,做 更 有 价值 的 测试 工作 。 


6.2 自动 化 测试 基本 原则 


1. 适合 做 自动 化 测试 的 软件 


很 多 公司 都 知道 自动 化 测试 可 以 提高 测试 的 效率 ,但 在 知道 这 个 道理 的 公司 中 大 部 分 
都 是 以 手工 测试 为 主 的 ,原因 可 能 有 很 多 ,但 最 大 的 影响 因素 就 是 自动 化 测试 的 成 本 。 如 果 
自动 化 测试 的 成 本 比 手工 测试 的 成 本 还 大 或 者 并 没有 比 手 工 测试 占有 太 大 的 优势 ,公司 自 
然 不 会 选择 自动 化 测试 了 。 是 否 做 自动 化 测试 ,主要 看 成 本 的 投入 和 效果 的 产 出 是 否 值 得 。 

1) 不 适合 做 自动 化 测试 的 系统 

CD 系统 业务 逻辑 和 交互 过 于 复杂 

如 果 系 统 业 务 逻 辑 和 交互 过 于 复杂 ,要 实现 自动 化 测试 的 成 本 非常 高 ,工具 开发 和 脚本 
编写 的 时 间 可 能 远 远大 于 手工 测试 ,这 个 系统 就 没有 自动 化 测试 的 必要 。 
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(2) 项 目 周期 过 短 

如 果 系 统 的 生命 周期 很 短 (半年 内 ) ,即使 很 容易 实现 自动 化 测试 ,但 自动 化 测试 的 使 用 
率 只 有 很 短 的 时 间或 很 有 限 的 次 数 ,这 样 的 自动 化 测试 也 没有 必要 。 因 为 前 期 脚本 的 编写 和 
后 期 的 维护 都 需要 很 多 的 时 间 , 虽 然 自动 化 测试 在 功能 测试 的 过 程 或 回归 测试 的 过 程 会 节省 
一 些 时 间 ,但 如 果 自 动 化 测试 的 脚本 只 是 很 短 的 生命 周期 ,自动 化 测试 的 成 本 就 非常 高 了 。 

(3) 系统 需求 频繁 变动 

对 于 功能 不 稳定 的 系统 ,会 由 于 这 些 不 稳定 因素 导致 自动 化 测试 失败 ,自动 化 的 测试 结 
果 也 就 变 得 不 可 信 , 这 类 型 的 系统 也 不 适合 使 用 自动 化 测试 。 

2) 适合 做 自动 化 测试 的 系统 

适合 做 自动 化 测试 的 系统 ,通常 是 一 些 生命 周期 比较 长 的 项 目 或 产品 , 且 系 统 功 能 实现 
自动 化 测试 也 较为 容易 ,这 样 的 项 目 使 用 自动 化 测试 必然 可 以 节省 很 多 的 资源 和 成 本 。 特 
别 是 一 些 在 今后 的 几 年 间 需 要 不 断 开发 和 维护 的 项 目 ,需要 重复 地 进行 大 量 的 回归 测试 ,如 
果 有 完善 的 自动 化 测试 脚本 ,回归 测试 就 可 以 节省 大 量 的 时 间 和 精力 了 。 对 于 一 些 增 量 式 
的 产品 ,白天 手工 测试 新 功能 ,晚上 或 周末 利用 自动 化 测试 脚本 回归 测试 ,可 以 达到 资源 使 
用 的 最 优化 ,用 很 少 的 时 间 和 很 少 的 资源 做 很 多 的 事情 。 

简 而 言 之 ,是 否 值得 使 用 自动 化 测试 ,就 要 看 它 是 否 具有 自动 化 测试 的 特点 和 高 的 投资 
回报 率 。 


2. 开始 自动 化 测试 的 时 机 


如 果 是 新 的 自动 化 测试 工具 的 开发 或 研究 ,最 好 预 留 一 个 比较 充裕 的 时 间 ,时 间 太 赶 很 
难 设计 出 精品 。 如 果 想 在 功能 测试 阶段 使 用 自动 化 测试 ,那么 自动 化 测试 架构 的 设计 最 好 
能 够 与 代码 实现 同步 ,否则 如 果 等 代码 实现 提交 测试 之 后 再 做 自动 化 测试 工具 的 开发 或 研 
究 ,在 功能 测试 或 回归 测试 的 过 程 中 就 被 动 了 很 多 。 

关于 在 项 目的 什么 阶段 开始 自动 化 测试 ,由 项 目 决定 ,对 于 需求 相对 稳定 并 且 是 基于 成 
熟 的 架构 上 开发 的 系统 ,自动 化 测试 脚本 最 好 在 功能 测试 开始 之 前 编写 ,在 功能 测试 阶段 就 
可 以 使 用 已 经 编写 好 的 脚本 做 功能 测试 了 。 

但 人 们 平时 遇 到 的 项 目 , 有 很 多 是 需求 变化 比较 大 的 ,或 者 是 一 些 不 够 成 熟 的 系统 ,这 
样 的 系统 如 果 在 功能 测试 之 前 编写 好 的 脚本 ,很 有 可 能 不 能 在 系统 上 正确 运行 ,大 多 还 是 需 
要 手工 执行 才 可 以 测试 ,甚至 在 功能 测试 完 后 的 系统 跟 功 能 测试 之 前 的 系统 会 有 非常 大 的 
区 别 。 对 于 这 样 的 项 目 ,自动 化 测试 开始 的 越 早 ,项 目的 成 本 就 越 大 ,最 好 在 系统 的 架构 或 
需求 相对 稳定 后 再 做 自动 化 测试 。 

对 于 一 些 需要 录制 GUI 界面 的 功能 的 自动 化 测试 ,在 页 面 的 功能 相对 稳定 之 后 再 做 自 
动 化 测试 性 价 比 会 比较 高 ,因为 页 面 是 最 容易 变动 的 部 分 ,而 且 任 何 一 个 控件 的 修改 都 会 导 
致 自动 化 工具 不 能 识别 控件 ,导致 很 多 自动 化 测试 脚本 会 跟着 做 大 量 的 修改 ,增加 了 维护 的 
成 本 。 当 然 ,因为 页 面 变化 而 引起 的 脚本 的 改动 的 大 小 :也 跟 自动 化 测试 的 架构 和 写 脚本 的 
功力 有 密切 的 关系 。 

对 于 一 些 协议 或 接口 相关 的 功能 测试 (例如 XML 或 Socket 接口 等 ) ,是 较为 容易 实现 
自动 化 测试 的 ,封装 好 底层 的 协议 提供 给 自动 化 测试 脚本 调用 ,即使 是 协议 会 有 变化 ,改动 
起 来 还 是 很 简单 的 ,维护 的 成 本 相对 较 低 。 
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总 地 来 说 ,在 软件 功能 达到 相对 的 稳定 ,没有 严重 错误 和 逻辑 错误 后 开始 自动 化 测试 ， 
性 价 比 是 比较 高 的 。 


3. 自动 化 测试 的 覆盖 率 


自动 化 测试 的 覆盖 率 是 很 多 管理 层 所 关心 的 ,很 多 项 目 或 产品 的 自动 化 测试 目标 之 一 
就 是 自动 化 测试 的 覆盖 率 。 从 管理 的 角度 来 说 ,100% 的 自动 化 目标 只 是 一 个 从 理论 上 可 能 
达到 的 数值 ,但 是 实际 上 达到 100% 的 自动 化 的 代价 是 十 分 昂贵 的 。 自 动 化 测试 覆盖 率 越 
高 ,测试 脚本 的 维护 成 本 也 就 越 大 。 因 为 所 构建 版 本 的 需求 变化 的 复杂 程度 ,将 花费 更 多 的 
时 间 在 变更 测试 用 例 上 以 使 它们 能 够 正确 地 运行 。 

自动 化 测试 的 覆盖 率 的 大 小 与 自动 化 测试 的 成 本 有 着 很 大 的 联系 。 自 动 化 测试 的 覆盖 
率 为 多 少 比较 恰当 ,也 要 看 被 测试 系统 的 性 质 和 测试 的 阶段 。 

在 自动 化 测试 设计 的 阶段 ,可 以 考虑 先 实现 冒 烟 测试 的 测试 用 例 自 动 化 , 冒 烟 测试 的 功 
能 一 般 是 系统 的 主要 功能 ,是 自动 化 测试 设计 必须 首先 实现 的 ,而 且 通 过 实现 这 些 功能 ,也 
可 以 检验 自动 化 测试 的 架构 是 否 合理 。 

在 功能 测试 的 前 期 ,自动 化 测试 脚本 的 覆盖 率 最 好 只 是 一 些 关键 的 并 且 是 相对 稳定 的 
功能 的 测试 自动 化 ,用 于 冒 烟 测试 或 关键 功能 测试 。 

系统 稳定 后 ,如 果 系 统 是 一 个 生命 周期 很 长 的 系统 , 且 测 试 的 功能 很 容易 实现 自动 化 测 
试 ,这 样 的 系统 自动 化 测试 覆盖 率 可 以 考虑 在 80% L... 

但 如 果 是 一 些 时 间 很 赶 的 项 目 , 或 者 是 一 些 比较 难 实现 自动 化 测试 的 功能 ,也 就 没有 追 
求 高 的 自动 化 测试 的 覆盖 率 的 必要 。 随 着 测试 案例 的 增加 ,维护 的 成 本 也 会 相应 增加 ,特别 
是 一 些 GUI 的 测试 ,自动 化 比率 越 高 ,维护 脚本 的 成 本 也 就 越 高 。 

不 要 追求 在 很 短 的 时 间 实 现 自动 化 测试 ,也 不 要 追求 100% 的 自动 化 测试 覆盖 率 , 积 累 
经 验 循序 渐进 的 自动 化 测试 ,效果 会 更 好 。 


6.3 自动 化 测试 实现 基本 策略 


自动 化 测试 与 软件 开发 本 质 上 是 一 样 的 ,利用 自动 化 测试 工具 ,经 过 测试 需求 分 析 , 设 
计 出 自动 化 测试 用 例 , 从 而 搭建 自动 化 测试 的 框架 ,设计 与 编写 自动 化 脚本 ,验证 测试 脚本 
的 正确 性 ,最 终 完 成 自动 化 测试 测试 脚本 ( 即 主要 功能 为 测试 的 应 用 软件 ) 。 


1. 测试 系统 需求 分 析 


任何 测试 的 基础 都 是 被 测 系统 的 功能 ,不 管 是 手工 的 功能 测试 还 是 自动 化 测试 或 者 是 
性 能 测试 ,都 是 基于 系统 的 功能 展开 的 。 当 测试 项 目 满足 了 自动 化 的 前 提 条 件 ,并 确定 在 该 
项 目 中 需要 使 用 自动 化 测试 时 , 便 开始 进行 自动 化 测试 需求 分 析 。 此 过 程 需要 确定 自动 化 
测试 的 范围 以 及 相应 的 测试 用 例 、 测 试 数据 ,并 形成 详细 的 文档 ,以 便于 自动 化 测试 框架 的 
建立 。 

很 多 公司 都 是 将 自动 化 测试 和 功能 测试 划分 成 两 个 不 同 的 团队 ,自动 化 测试 团队 的 同 
事实 现 自动 化 测试 工具 的 开发 ,功能 测试 团队 的 同事 向 自动 化 测试 团队 的 同事 提 需 求 , 自 动 
化 测试 团队 的 同事 编写 代码 实现 自动 化 测试 工具 的 功能 后 提交 给 功能 测试 团队 的 同事 使 
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用 ,这 是 当前 非常 常见 的 自动 化 测试 的 模式 ,毕竟 每 个 人 都 有 自己 擅长 的 技能 ,每 个 人 也 不 
可 能 面面俱到 ,通过 这 样 的 一 种 方式 可 能 使 自动 化 测试 的 门槛 变 得 更 低 一 些 。 自 动 化 测试 
工具 的 开发 和 自动 化 测试 的 使 用 的 确 是 可 以 由 不 同 的 角色 去 承担 ,不 过 作为 自动 化 架构 设 
计 的 人 员 ,应 该 是 对 系统 的 功能 或 需求 非常 熟悉 ,同时 具有 良好 的 设计 和 开发 能 力 , 才 可 以 
设计 出 适合 测试 系统 的 自动 化 测试 架构 ,否则 开发 出 来 的 自动 化 测试 工具 就 只 是 简单 的 一 
个 工具 ,而 某 种 程度 上 还 会 增加 维护 的 成 本 。 

漂亮 的 自动 化 测试 架构 的 设计 是 一 个 渐进 的 过 程 ,但 这 个 渐进 是 基于 对 功能 熟悉 的 基 
础 上 ,全 盘 考 虑 之 后 一 点 儿 一 点 儿 地 搭建 起 来 的 。 


2. 自动 化 测试 工具 的 选择 


工具 始终 是 工具 ,思想 和 架构 才 是 自动 化 测试 的 核心 ,同样 的 工具 不 同 的 人 使 用 会 出 现 
完全 不 一 样 的 结果 ,而 且 ,不 管 是 什么 样 的 自动 化 测试 工具 ,原理 都 有 异曲同工 之 处 。 所 以 ， 
在 进行 自动 化 测试 时 ,不 需要 把 工具 看 得 那么 重要 ,而 应 把 怎样 使 用 工具 ,怎样 利用 工具 为 
测试 服务 放 在 首位 。 也 就 是 测试 的 思想 位 于 工具 之 上 。 

但 是 ,是 不 是 这 就 意味 着 测试 工具 一 点 儿 也 不 重要 呢 ? 当然 不 是 , 遇 上 不 稳定 或 不 友好 
的 测试 工具 ,可 能 会 浪费 大 量 的 时 间 在 调试 工具 上 ,也 可 能 会 出 现 因为 工具 不 稳定 导致 测试 
结果 的 不 可 信任 ,那么 自动 化 测试 不 是 提高 测试 效率 反而 是 阻碍 了 测试 的 进度 。 

关于 工具 的 选择 或 开发 ,基本 的 原则 如 下 。 

(1) 能 够 满足 项 目的 需求 ,容易 扩展 ,可 以 满足 系统 任何 重要 功能 的 自动 化 测试 ; 

(2) 友好 易 用 ,容易 上 手 ,为 测试 人 员 提 供 较 低 的 门槛 ; 

(3) 当然 最 重要 的 是 它 的 稳定 性 ,是 否 不 需要 人 工 干预 就 能 稳定 地 批量 运行 所 有 的 自 
动 化 测试 脚本 ,并且 能 够 导出 准确 的 测试 报告 

(4) 还 有 一 点 就 是 它 的 性 价 比 是 否 值得 ,免费 的 软件 对 公司 来 说 当然 是 最 好 的 。 

例如 ,市场 上 有 很 多 测试 工具 ,在 这 些 测 试 工具 中 ,PureTest 是 一 个 性 价 比 很 高 的 自动 
化 测试 工具 。 它 容易 入 门 ,易于 扩展 ,使 用 简单 ,运行 稳定 ,基本 上 可 以 满足 任何 包括 GUI, 
协议 和 业务 逻辑 的 测试 。 


3. 自动 化 测试 架构 设计 


自动 化 测试 架构 的 设计 是 整个 自动 化 测试 的 灵魂 核心 , 它 的 好 坏 关系 到 自动 化 测试 的 
成 败 。 从 系统 的 基本 功能 入 手 , 设 计 自动 测试 架构 ,这 是 软件 测试 的 关键 一 步 。 架 构 的 好 与 
坏 很 重要 , 它 影 响 到 系统 的 扩展 、 维 护 和 使 用 ,如 果 想 要 系统 容易 扩展 和 维护 ,一定 要 多 花心 
思 在 设计 上 。 用 什么 测试 工具 其 实 并 不 那么 重要 ,不 同 的 人 使 用 同样 的 测试 工具 ,会 做 出 效 
果 完 全 不 一 样 的 自动 化 测试 , 那 是 因为 他 们 的 测试 架构 不 同 ,设计 比 工具 重要 得 多 。 

怎样 的 自动 化 测试 架构 才 算 是 一 个 好 的 架构 ? 第 一 ,容易 扩展 ,能 够 满足 现在 的 功能 需 
求 , 也 能 满足 以 后 需要 测试 的 功能 的 需求 。 第 二 ,容易 维护 , 当 业 务 流程 ,接口 或 页 面 变 动 的 
时 候 , 只 需要 做 一 些 简单 的 修改 就 可 以 实现 。 第 三 ,可 读 性 强 , 别 人 能 够 容易 读 懂 和 接手 维 
护 。 第 四 ,容易 使 用 ,项 目 组 的 其 他 人 想 要 使 用 的 时 候 能 够 简单 地 搭建 和 运行 。 第 五 ,有 统 
一 的 编码 规范 、 存 储 规范 和 编写 风格 。 第 六 ,方便 调试 , 当 脚 本 运行 出 现 问 题 的 时 候 ,可 以 方 
便 跟踪 问题 产生 的 根源 。 第 七 ,结构 清晰 ,测试 用 例 与 测试 工具 和 代码 分 离 。 第 八 ,也 是 最 
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重要 的 一 点 ,是 脚本 具有 很 高 的 可 信和 性 以 及 自动 运行 的 稳定 性 。 

在 设计 架构 之 前 ,首先 要 熟悉 测试 系统 以 及 这 个 测试 系统 需要 测试 的 功能 有 哪些 类 型 , 
每 种 测试 类 型 在 测试 架构 中 是 否 都 可 以 满足 。 在 设计 架构 时 ,可 以 选择 覆盖 系统 基本 功能 
的 冒 烟 测 试用 例 来 做 基本 的 测试 用 例 , 在 实现 这 些 基本 的 测试 用 例 的 自动 化 测试 过 程 中 ,对 
架构 进行 完善 。 基 本 的 自动 化 测试 框架 实现 之 后 ,再 回顾 一 下 是 否 测试 系统 中 需要 实现 自 
动 化 的 测试 用 例 , 测 试 架 构 都 可 以 满足 需求 ,如 果 不 可 以 满足 则 需要 继续 做 进一步 的 开发 ， 
如 果 测 试 架构 可 以 满足 需求 , 接 下 来 可 以 让 其 他 的 同事 使 用 ,收集 改进 的 建议 对 测试 架构 进 
行 完善 和 改进 。 好 的 测试 架构 ,是 要 使 用 的 人 觉得 舒服 。 

自动 化 测试 架构 设计 的 时 候 的 一 些 基 本 策略 如 下 。 

CD 自动 化 测试 脚本 与 自动 化 测试 架构 的 代码 分 离 ,自动 化 测试 架构 的 代码 实现 自动 
化 测试 的 基本 功能 ,自动 化 测试 脚本 包含 业务 逻辑 。 

(2) 设计 清晰 的 脚本 和 配置 文件 的 存放 目录 。 

(3) 数据 驱动 。 

D 测试 系统 相关 的 配置 .模拟 器 的 配置 等 系统 级 的 配置 用 系统 级 配置 文件 存放 ,不 要 
把 这 些 值 固定 地 写 在 脚本 或 代码 中 ,否则 当 测 试 系统 的 环境 变化 的 时 候 相应 的 维护 成 本 也 
会 很 高 。 

@ 测试 系统 所 使 用 到 的 一 些 规范 定义 取 值 ,定义 在 配置 文件 中 ,在 脚本 中 需要 使 用 的 
时 候 引 用 变量 定义 ,这 样 即使 规范 定义 改变 了 也 不 需要 修改 脚本 ,只 要 简单 地 修改 配置 文件 
即 可 ; 如 果 外 部 规范 定义 和 内 部 的 定义 取 值 不 一 样 ,最 好 有 对 应 的 映射 定义 表 。 

@ 测试 数据 的 数据 模型 如 果 比 较 复杂 ,最 好 也 在 配置 文件 中 对 数据 模型 以 及 字段 的 取 
值 进行 定义 ,方便 在 脚本 中 创建 数据 时 使 用 。 

@ 协议 或 Schema 或 话 单 的 格式 ,在 配置 文件 中 定义 , 当 协议 的 格式 改动 的 时 候 , 只 
要 修改 配置 文件 即 可 。 

C) 脚本 中 尽量 少 用 常量 ,输入 参数 、 脚 本 运行 时 提取 的 值 , 测 试 结果 的 对 比 等 ,都 可 以 
使 用 变量 ,避免 脚本 的 常量 写 死 后 引起 的 维护 工作 。 

(4) 测试 数据 准备 。 

D 测试 数据 准备 ,有 两 种 类 型 ,一 类 是 脚本 运行 前 事先 可 以 准备 好 的 数据 ,这 种 类 型 
的 数据 ,可 以 在 自动 化 测试 前 自动 创建 好 并 保存 到 文件 中 提供 给 测试 脚本 使 用 ; 另 一 类 
是 脚本 运行 时 要 创建 的 特殊 数据 ,这 些 数据 可 以 在 脚本 运行 的 过 程 中 调用 基础 脚本 进行 
创建 。 

@ 公用 的 数据 ,如 果 在 脚本 运行 的 过 程 中 被 修改 ,在 该 脚本 运行 结束 后 需要 恢复 到 原 
样 ,避免 因为 公用 数据 的 修改 引起 其 他 脚本 运行 失败 。 

(5) 模块 化 : 对 基础 脚本 进行 封装 ,一 些 可 以 公用 的 脚本 单独 封装 给 其 余 的 测试 脚本 
调用 , 当 公 用 的 业务 逻辑 改变 的 时 候 , 只 需要 修改 基础 脚本 ,而 不 需要 对 所 有 的 测试 脚本 进 
行 改 动 。 

(6) 提供 自动 化 脚本 编写 模板 ,新 写 的 脚本 只 需要 在 模板 的 基础 上 做 很 小 的 改动 就 可 
以 实现 功能 ,可 以 节省 脚本 编写 的 时 间 和 降低 脚本 编写 的 门槛 。 
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4. 自动 化 测试 脚本 编写 


自动 化 测试 脚本 的 编写 功力 很 重要 , 写 得 好 的 脚本 ,可 以 减少 维护 的 工作 量 。 自 动 化 测 
试 脚本 一 般 由 测试 的 输入 .业务 逻辑 测试 输出 和 测试 结果 验证 几 部 分 组 成 。 自 动 化 脚本 的 
编写 ,要 注意 全 局 的 把 握 和 审核 ,不 同 的 人 会 有 不 同 的 风格 , 稍 不 注意 就 会 出 现 问题 。 在 自 
动 化 脚本 编写 前 ,给 相关 同事 提供 技术 和 架构 的 培训 ,培训 的 内 容 包括 被 测试 系统 的 基本 功 
能 介绍 自动 化 测试 工具 的 架构 自动 化 测试 的 配置 说 明 自动 化 测试 的 编写 原则 自动 化 脚 
本 编写 示例 等 。 自 动 化 测试 脚本 的 例子 也 很 重要 ,建议 在 脚本 编写 前 对 系统 准备 实现 自动 
化 测试 的 功能 进行 分 类 ,由 资深 的 自动 化 测试 工程 师 根 据 每 个 分 类 都 先 写 一 个 例子 并 且 审 
核 通过 后 作为 这 些 功能 的 自动 化 测试 脚本 的 编写 模板 ,其 余 的 同事 可 以 参照 例子 按照 自动 
测试 架构 编写 规范 写 脚本 。 

编写 脚本 时 应 该 注意 脚本 的 可 重用 性 和 可 维护 性 ,如 果 脚 本 中 充满 了 硬 编码 的 值 ,这 些 
值 应 该 被 参数 化 ,否则 脚本 仅 适 用 于 一 个 测试 情况 ,脚本 还 应 该 加 入 条 件 判断 、 循 环 等 结构 ， 
以 便 增 强 测试 脚本 的 灵活 性 。 

在 编写 脚本 的 时 候 必然 会 遇 到 技术 问题 或 业务 问题 ,需要 有 资深 的 工程 师 或 团队 组 长 
协助 解决 ,并 且 在 整体 的 架构 上 全 局 把 握 。 脚 本 编写 完成 后 ,需要 有 一 个 抽查 审核 的 过 程 ， 
挑 几 个 典型 的 脚本 审核 一 下 ,看 看 是 否 存 在 不 足 的 地 方 ,然后 改进 。 


5. 自动 化 测试 脚本 测试 


当 每 一 个 测试 用 例 所 形成 的 脚本 通过 测试 后 ,并 不 意味 着 执行 多 个 甚至 所 有 的 测试 用 
例 就 不 会 出 错 。 输 入 数据 以 及 测试 环境 的 改变 ,都 会 导致 测试 结果 受到 影响 甚至 失败 。 而 
如 果 只 是 一 个 个 执行 测试 用 例 ,也 仅 能 被 称 作 是 半自动 化 测试 ,这 会 极 大 地 影响 自动 化 测试 
的 效率 ,甚至 不 能 满足 夜间 自动 执行 的 特殊 要 求 。 

自动 化 测试 脚本 最 基本 的 原则 是 测试 结果 可 信 , 也 就 是 在 批 处 理 运 行 这 些 脚 本 的 时 候 ， 
该 测试 通过 的 就 测试 通过 ,该 测试 失败 的 就 测试 失败 ,如 果 出 现 本 应 该 失败 的 脚本 在 运行 的 
时 候 通过 了 或 本 应 该 通过 的 脚本 在 运行 时 失败 了 ,测试 结果 就 变 得 不 可 信 ,自动 化 测试 也 就 
失去 它 本 应 该 有 的 意义 。 

因此 ,脚本 的 测试 与 试 运行 极为 重要 , 它 需 要 检查 多 个 脚本 不 能 依 计划 执行 的 原因 ,并 
保证 其 得 到 修复 。 同 时 它 也 需要 经 过 多 轮 的 脚本 试 运行 ,以 保证 测试 结果 的 一 致 性 与 精 
确 性 。 


6. 自动 化 测试 脚本 执行 


自动 化 脚本 主要 有 三 个 用 途 : 功能 测试 ,为 手工 测试 做 数据 准备 和 回归 测试 。 在 功能 
测试 的 阶段 ,可 以 利用 自动 化 测试 脚本 进行 数据 的 准备 ,也 可 以 利用 自动 化 脚本 进行 功能 测 
试 。 在 项 目 稳定 之 后 自动 化 测试 的 最 大 价值 就 是 回归 测试 。 

脚本 可 以 分 为 三 个 级 别 : 基本 流程 测试 脚本 ,用 于 每 次 出 新 build( 新 构建 版 本 ,下 同 ) 
安装 后 做 冒 烟 测试 ; 关键 功能 测试 脚本 ,每 次 出 新 build 后 对 所 有 重要 功能 进行 回归 测试 ， 
确保 改动 不 会 对 原 有 功能 造成 影响 ; 全 面 回 归 测 试 脚本 ,系统 经 过 比较 大 的 修改 或 系统 上 
线 前 做 回归 测试 。 自 动 测试 脚本 在 回归 测试 中 发 挥 了 出 色 的 作用 ,特别 是 系统 在 上 线 前 夕 ， 
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为 了 适应 客户 的 需求 ,功能 不 断 修改 ,对 于 原 有 的 功能 ,自然 不 可 能 都 手工 测试 ,脚本 在 这 个 
时 候 的 意义 特别 大 。 


7. 自动 化 测试 的 持续 集成 


自动 化 测试 可 以 做 到 持续 集成 ,从 编译 到 测试 ,任何 一 步 都 可 以 自动 化 。 

CD 将 所 有 的 源 代码 存放 在 服务 器 ,持续 集成 任务 运行 起 来 后 到 源 代码 管理 服务 器 上 
进行 自动 编译 ,对 编译 的 结果 进行 分 析 , 并 将 编译 成 功 的 软件 版 本 放 到 发 布 服务 器 ; 

(2) 将 新 版 本 的 软件 下 载 到 测试 环境 ,并 且 自 动 安装 ; 

(3) 自动 安装 成 功 后 进行 冒 烟 测试 ,如 果 冒 烟 测 试 成 功 则 证 明 软 件 的 版 本 是 可 用 的 ; 

(4) 自动 执行 自动 化 测试 脚本 进行 功能 测试 或 回归 测试 ; 

(5) 自动 化 测试 结束 后 生成 测试 报告 ,将 测试 结果 发 送 邮件 给 相关 的 人 员 。 

在 持续 集成 中 任何 一 步 失败 都 会 导致 整个 测试 失败 ,自动 化 测试 生成 失败 的 测试 报告 ， 
并 将 测试 结果 发 送 给 相关 的 人 员 。 


6.4 手工 测试 和 自动 化 测试 的 比较 


1. 测试 项 目 立 项 


对 任何 一 个 软件 开发 项 目 而 言 ,测试 本 身 也 是 一 个 工程 化 的 过 程 , 它 同样 需要 经 过 项 目 
的 立项 这 一 个 步骤 ,这 一 个 步骤 所 要 解决 的 问题 主要 是 解决 测试 组 织 的 框架 的 问题 ,主要 是 
根据 测试 任务 的 规模 大 小 来 做 出 相应 的 先期 准备 工作 ; 主要 是 确定 项 目 负责 人 。 测 试 项 目 
立项 对 手工 测试 而 言 , 比 较 自由 ,主要 是 测试 项 目 负 责 人 的 问题 ,以 后 的 测试 工作 就 是 由 测 
试 项 目 负 责 人 和 整个 项 目的 项 目 经 理 来 进行 沟通 完成 。 对 自动 测试 而 言 ,项 目 立 项 中 不 但 
要 解决 前 面 所 提 及 的 问题 ,还 有 一 个 重要 的 问题 是 自动 测试 工具 的 选择 问题 。 对 于 自动 化 
测试 工具 的 选择 往往 要 取决 于 所 测试 项 目的 性 质 。 若 是 测试 项 目的 内 容 主 要 是 在 于 测试 软 
件 产品 的 UI, 那么 就 应 该 选用 GUI 测试 工具 如 IBM 公司 的 Rational Robot; 若是 偏重 于 测 
试 系统 性 能 ,可 以 选用 LoadRunner; 若是 想 实 现 单元 测试 的 自动 化 则 可 以 选用 JUnit 等 。 
但 是 无 论 选择 什么 样 的 工具 ,一 定 要 给 使 用 人 员 以 专业 的 培训 ,这 样 可 以 收 到 事半功倍 的 
效果 。 


2. 测试 计划 的 编制 


测试 计划 是 根据 用 户 需 求 报告 中 关于 功能 要 求 和 性 能 指标 的 规格 说 明 书 ,通过 定义 相 
应 的 测试 需求 报告 ,同时 ,还 要 适当 选择 测试 内 容 , 合 理 安排 测试 人 员 ,测试 时 间 及 测试 资源 
等 。 测 试 计划 活动 包含 对 下 面 问题 的 回答 。 

(1) 什么 和 在 哪里 ? 一 一 要 测试 什么 和 在 哪里 执行 这 些 测 试 ? 

(2) 为 什么 ? 一 一 为 什么 要 做 这 种 测试 ? 

(3) 什么 时 候 ? 一 一 什么 时 候 测 试 必须 执行 和 必须 通过 ? 

(4) HE? 一 一 由 谁 来 执行 这 些 测试 活动 ? 

测试 计划 编制 的 第 一 步 是 去 确定 测试 输入 。 测 试 输入 是 测试 的 依靠 或 是 测试 需要 的 验 
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证 。 测 试 输入 帮助 用 户 决定 需要 测试 的 内 容 , 它 们 帮助 我 们 确定 基于 开发 过 程 中 可 能 需要 
的 变化 。 在 确定 了 测试 输入 时 ,比较 容易 形成 一 个 测试 计划 。 测 试 计划 为 项 目 中 其 他 的 测 
试 提供 一 个 组 织 结构 。 需 要 注意 的 是 ,在 一 个 测试 项 目 中 可 能 包含 多 样 的 测试 计划 。 可 以 
为 测试 的 每 一 个 阶段 编制 一 个 计划 。 不 同 的 测试 工作 组 可 以 有 他 们 自己 的 测试 计划 。 一 般 
地 ,每 一 个 计划 应 当 有 一 个 确定 且 唯一 的 高 水 平 的 测试 目标 。 

在 软件 测试 计划 编制 这 一 点 上 ,手工 测试 的 重点 在 于 测试 进度 的 安排 ,测试 人 员 的 分 配 
上 ,以 及 测试 资源 的 调配 上 ,通常 是 要 生成 出 软件 测试 计划 说 明 书 。 后 面 的 测试 活动 都 是 按 
照 测试 计划 说 明 书 进行 逐步 展开 的 。 

而 对 自动 化 测试 则 是 在 上 一 步 选 定 的 测试 自动 化 工具 的 基础 上 进行 展开 的 ,利用 自动 
化 测试 工具 自身 附带 的 管理 工具 ,或 者 与 自动 化 测试 工具 配合 使 用 的 测试 管理 工具 ,直接 在 
工具 中 生成 实际 的 测试 计划 。 例 如 ,Rational Test Suite 中 的 Rational TestManager 就 是 一 
个 很 好 的 测试 计划 生成 工具 。 自 动 化 测试 中 的 资源 调配 也 可 以 在 其 中 进行 分 配 。 但 是 这 些 
管理 工具 的 缺点 是 无 法 应 付 短 时 间 突 发 事件 ,有 些 缺 乏 灵 活性 。 


3. 测试 的 设计 


测试 的 设计 主要 解决 “我 们 将 如 何 执行 测试 ?这 个 问题 。 一 个 完整 的 测试 设计 会 告 
我 们 有 关 需 要 与 系统 被 获得 的 活动 和 它们 应 该 期 待 观 察 的 行为 和 特性 ,当然 ,如 果 系 统 正 在 
适当 地 运行 的 话 。 

测试 的 设计 是 一 个 迭代 的 和 行进 中 的 过 程 ,应 当 能 够 在 任何 系统 执行 之 前 开始 测试 的 
设计 ,它们 是 基于 用 例 (use cases) 、 需 求 .原型 和 其 他 的 资源 而 产生 的 。 当 系统 被 描述 得 更 
加 清晰 时 ,测试 的 设计 应 当 与 系统 一 起 更 加 细节 化 。 需 要 注意 一 个 测试 的 设计 不 同 于 软件 
的 设计 工作 , 它 应 当 被 用 来 作为 建立 测试 用 例 的 指导 说 明 书 。 

手工 测试 中 的 测试 的 设计 多 是 利用 了 因果 图 、 等 价 类 划分 方法 、 边 界 值 分 析 方 法 、 错 误 
推测 方法 、 因 果 图 方法 .判定 表 驱动 等 这 些 方便 人 工分 析 的 方法 来 完成 测试 用 例 的 设计 ,使 
用 这 些 方法 来 完成 测试 的 设计 对 测试 人 员 的 要 求 比较 高 ,在 正式 的 测试 中 ,这 些 工作 都 是 测 
试 项 目 负责 人 或 者 有 相当 经 验 的 高 级 测试 工程 师 来 完成 的 。 这 是 因为 在 这 一 分 析 的 过 程 
中 ,更 多 需要 的 是 工作 的 经 验 , 人 的 智慧 ,人 的 责任 心 和 耐性 。 这 一 过 程 同 样 是 比较 烦琐 和 
关键 的 , 它 直 接 决 定 了 最 后 得 到 的 测试 用 例 的 质量 。 

而 在 自动 化 测试 中 ,测试 工具 多 是 使 用 了 类 似 于 软件 开发 过 程 中 的 那 种 迭代 的 方法 来 
完成 测试 的 设计 的 , 它 是 一 个 逐步 求 精 的 过 程 。 而 且 对 测试 的 分 析 过 程 中 出 现 的 遗漏 的 条 
件 很 容易 在 下 一 次 迭代 过 程 中 加 入 。 相 对 手工 测试 而 言 ,这 是 自动 化 测试 在 测试 的 设计 过 
程 中 的 最 大 的 优点 。 例 如 ,在 Rational Test Suite 的 TestManager 中 ,可 以 通过 下 列 步 又 完 
成 测试 的 设计 。 

(1) 指明 基本 步骤 需要 与 应 用 和 系统 交互 ,以 便 执 行 测试 。 就 是 测试 项 目 中 测试 用 例 
在 未 来 的 测试 脚本 中 的 安排 顺序 的 考虑 。 

(2) 指明 如 何 有 效 地 使 特征 恰当 地 工作 。 就 是 解决 如 何 安排 测试 的 校 验 点 的 问题 。 

(3) 说 明 测 试 的 前 置 条 件 和 后 置 条件 。 解 释 测试 的 先导 条 件 和 后 续 的 现场 回复 工作 。 

(4) 说 明 测 试 的 可 接受 标准 。 说 明 清 楚 测试 所 要 达到 的 精度 ,尤其 是 在 测试 那些 与 数 
据 处 理 程序 相关 的 项 目 中 ,这 一 点 尤其 重要 。 
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所 以 在 自动 化 测试 中 ,测试 的 设计 比 一 个 手工 测试 的 设计 要 更 抽象 ,但 是 它 可 以 容易 地 
发 展 成 一 个 测试 的 执行 ,但 是 自动 化 测试 方法 中 测试 的 设计 会 受 机 器 配置 的 制约 。 如 机 器 
系统 硬件 系统 ,软件 系统 的 配置 ,网 络 系统 的 配置 等 ,这 些 在 自动 化 测试 过 程 中 必须 考虑 进 
去 ,但 是 手工 测试 不 一 样 , 它 比较 灵活 ,人 工 可 以 很 容易 地 改变 机 器 的 配置 ,而 后 再 次 进行 
测试 。 


4. 测试 的 实施 


测试 的 实施 其 实在 这 里 对 手工 测试 而 言 是 要 得 到 真正 可 用 的 测试 用 例 , 以 形成 测试 执 
行人 员 在 进行 测试 执行 时 的 依据 。 这 一 步骤 对 手工 测试 尤其 简单 ,因为 在 手工 测试 过 程 中 
一 旦 完成 了 测试 设计 ,那么 测试 用 例 的 生成 就 是 一 件 极 为 容易 的 事情 。 在 大 多 数 的 手工 测 
试 项 目 中 ,测试 主管 往往 是 将 这 一 步骤 和 上 面 的 测试 的 设计 混合 在 一 起 来 执行 的 ,最 终 是 要 
形成 可 视 的 文档 。 

对 自动 测试 而 言 ,测试 实施 的 活动 包括 可 复 用 测试 脚本 的 设计 和 开发 ,测试 脚本 用 来 实 
施 测 试用 例 。 在 使 用 了 和 迭代 的 方法 完成 测试 的 设计 后 ,就 可 以 得 到 实际 上 可 以 使 用 的 测试 
用 例 , 这 时 可 以 将 测试 用 例 和 根据 测试 用 例 开发 出 来 的 测试 脚本 进行 结合 ,将 它们 联系 在 一 
起 。 在 这 种 联系 的 过 程 中 ,脚本 和 测试 用 例 之 间 的 关系 并 不 一 定 是 一 一 对 应 的 ,大 多 数 情 况 
下 ,都 是 一 个 测试 用 例 对 应 一 个 或 者 一 个 以 上 的 测试 脚本 。 

在 每 一 个 测试 的 项 目 中 ,测试 的 实施 都 是 不 相同 的 。 需 要 注意 的 是 ,自动 化 测试 中 往往 
要 求 将 测试 用 例 和 开发 出 来 的 测试 脚本 组 合 进行 顺序 、 优 先 级 .执行 次 数 上 的 安排 。 如 在 
Rational Test Suite 的 TestManager 中 , 它 提供 了 一 种 称 为 Suite 的 组 合 方式 ,就 是 将 许多 
的 测试 用 例 和 脚本 进行 组 合 编排 ,形成 一 个 测试 Suite. fE Suite 中 可 以 添加 同步 点 .时 间 延 
述 命 令 、 场 景 等 ,使 得 在 一 个 测试 Suite 中 可 以 在 多 台 不 同 测试 机 器 上 同时 执行 。 这 种 Suite 
还 支持 嵌 套 使 用 。 

相对 手工 测试 而 言 ,自动 化 测试 在 这 一 步骤 中 要 花费 比 手 工 测 试 更 多 的 时 间 。 但 是 测 
试 脚本 的 质量 的 好 坏 直 接 影响 了 整个 测试 项 目的 进行 。 所 以 这 一 个 步骤 对 自动 化 测试 项 目 
而 言 是 其 关键 。 


5. 测试 的 执行 


测试 执行 对 手工 测试 而 言 ,就 是 一 个 启动 机 器 和 被 测试 的 程序 ,按照 测试 用 例 规定 的 步 
又 一 步 步 执行 测试 的 过 程 。 在 这 个 过 程 中 ,输入 的 数据 的 值 及 类 型 均 已 经 在 测试 用 例 中 有 
了 明确 的 规定 ,预期 的 输出 在 测试 用 例 中 也 做 出 了 清楚 的 说 明 。 测 试 人 员 只 是 被 动 地 执行 
测试 用 例 过 程 。 这 个 过 程 对 测试 人 员 而 言 是 一 个 比较 枯燥 且 乏 味 的 阶段 。 只 是 到 了 测试 输 
出 后 ,测试 人 员 需 要 将 测试 的 实际 输出 和 预期 输出 进行 人 工 的 比较 来 确定 软件 中 是 否 有 
Bug 存在 。 

但 是 对 自动 化 测试 而 言 ,我 们 的 测试 执行 活动 包含 要 求 自 动 测试 的 实施 的 执行 就 应 该 
确保 系统 功能 的 正确 性 。 通 过 自动 化 测试 工具 ,可 以 做 到 : 

(1) 一 个 单独 的 测试 脚本 ; 

(2) 一 个 或 更 多 的 测试 用 例 ; 

(3) 一 个 测试 的 集合 (如 TestManager 中 Suite) ,执行 一 些 测试 用 例 和 测试 脚本 的 混合 
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Jk ,这 一 过 程 是 通过 一 台 或 更 多 的 测试 用 机 和 虚拟 测试 者 来 完成 的 。 

例如 ,在 Rational TestManager 中 就 提供 了 如 下 几 种 测试 。 

(1) GUI 测试 一 一 图 形 界面 测试 ; 

(2) VU 测试 一 一 虚拟 用 户 测试 ,多 用 于 性 能 测试 中 ; 

(3) VB 测试 一 一 针对 VB 的 测试 ; 

(4) Java 测试 一 一 针对 Java 系统 的 测试 ; 

(5) Manual 测试 一 一 手动 和 自动 的 结合 测试 ; 

(6) CommandLine 测试 命令 行 的 测试 。 

需要 注意 的 是 ,自动 测试 一 旦 启动 执行 ,只 要 测试 脚本 是 正确 的 ,一 般 情况 下 , 它 的 执行 
是 不 会 轻易 被 终止 的 ,除非 是 脚本 执行 结束 或 者 测试 人 员 人 工 干预 终止 。 由 于 这 种 特性 ,所 
以 ,自动 测试 大 多 利用 的 是 测试 人 员 的 非 工 作 时 间 来 执行 的 。 这 样 能 大 大 提高 人 工效 益 。 
但 是 ,相对 手工 测试 而 言 ,自动 化 测试 的 执行 对 脚本 的 依赖 程度 极 高 ,一 旦 测试 的 对 象 发 生 
改变 或 者 测试 环境 发 生 了 改变 ,就 会 导致 测试 脚本 出 错 , 使 得 整个 测试 无 法 顺利 执行 。 而 手 
工 测试 不 一 样 ,手工 测试 最 大 的 特点 是 灵活 性 极 高 。 一 旦 测试 的 对 象 或 者 测试 环境 发 生 改 
变 , 测 试 执行 人 员 也 能 很 容易 地 发 现 错误 ,即使 是 测试 用 例 没有 改变 。 所 以 在 测试 执行 的 灵 
活 程度 上 ,手工 测试 的 程度 要 好 。 但 是 自动 化 测试 的 费 效 比比 较 高 。 


6. 测试 的 评估 


测试 的 评估 活动 包括 : 

CD 确定 实际 测试 执行 的 有 效 性 。 执 行 得 是 否 完全 ? 执行 失败 是 否 因 为 不 符合 前 置 
条 件 ? 

(2) 分 析 测 试 输出 以 确定 结果 。 在 执行 测试 过 程 中 ,查看 报告 上 已 产生 的 数据 来 检验 
该 执行 是 否 是 可 接受 的 。 

(3) 查看 合计 的 结果 以 检查 对 测试 计划 ,测试 输入 ,配置 等 的 覆盖 程度 。 这 也 可 以 被 用 
来 衡量 测试 的 进展 和 对 分 析 的 趋向 。 

(4) 评价 本 次 测试 的 有 效 性 等 。 若 是 有 需要 还 要 向 上 级 给 出 相应 的 评价 报告 。 

对 手工 测试 而 言 ,这 个 任务 是 通过 统计 过 程 来 完成 的 。 测 试 人 员 完 成 测试 后 ,需要 将 相 
关 的 测试 结果 记录 下 来 ,同时 还 要 统计 执行 失败 的 测试 用 例 , 从 这 些 数 据 中 形成 本 次 测试 报 
告 ,上 交 给 测试 项 目 负 责 人 后 ,由 测试 项 目 负责 人 来 完成 整个 测试 项 目 情况 的 汇总 ,并 在 汇 
总 的 基础 上 完成 对 测试 项 目的 分 析 。 手 工 测 试 中 往往 要 使 用 到 将 统计 到 的 大 量 数据 进行 公 
式 化 的 计算 才能 得 出 最 终 的 结论 和 形成 最 后 的 报表 。 所 以 相对 而 言 比较 麻烦 ,工作 量 大 。 

对 自动 化 测试 而 言 ,这 一 切 操作 起 来 相对 比较 简单 ,一 般 情 况 下 可 以 借助 自动 化 测试 工 
具 中 带 有 的 报告 生成 机 制 完 成 这 个 任务 。 在 Rational TestManager 中 , 它 里 面 的 TestLog 
清晰 地 记录 了 测试 执行 ,测试 过 程 中 发 生 的 问题 ,测试 用 例 成 功 和 失败 的 比例 ,测试 过 程 
Log 信息 ,同时 在 这 些 信 息 的 基础 上 ,运用 提供 的 工具 就 可 以 很 容易 地 生成 在 这 个 项 目 中 包 
含 的 测试 对 象 的 情况 汇总 。 但 是 ,需要 注意 的 是 ,自动 化 测试 工具 能 对 给 定 的 预期 的 输入 
(脚本 中 设 定 或 者 取 自 于 测试 脚本 的 数据 池 ) 和 产生 的 输出 进行 比较 ,但 是 工具 本 身 并 不 能 
告诉 测试 者 软件 是 通过 了 测试 还 是 没有 通过 它 只 能 说 明 实 际 输出 结果 和 与 预期 结果 是 
否 相 符 。 这 也 是 自动 化 测试 和 手工 测试 的 一 个 很 重要 的 区 别 。 所 以 对 于 采用 自动 化 测试 方 
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式 执行 失败 的 用 例 往往 还 是 需要 使 用 手工 的 方式 来 检查 分 析 , 所 以 从 这 个 程度 上 来 说 ,手工 
测试 是 自动 化 测试 的 一 个 必要 的 补充 。 

在 上 面 的 几 个 步骤 中 ,按照 测试 过 程 展开 的 顺序 依次 比较 了 手工 测试 方法 和 自动 化 测 
试 方法 的 区 别 , 可 以 看 出 来 ,手工 测试 最 大 的 优点 是 灵活 ,最 大 的 缺点 是 费 效 比 太 低 。 但 是 
自动 测试 最 大 的 优点 是 它 处 理 得 快捷 ,但 是 不 灵活 。 下 面 就 结合 手工 测试 和 自动 化 测试 各 
自 的 特点 谈 谈 它们 各 自 适合 的 场合 。 


7. 手工 测试 和 自动 化 测试 的 特点 及 各 自 适用 场合 


1) 手工 测试 的 特点 

(1) 测试 人 员 要 负责 大 量 文档 、 报 表 的 制订 和 整理 工作 ,会 变 得 力不从心 。 

(2) 受 软件 分 发 日 期 开发 成 本 及 人 员 、 资 源 等 诸多 方面 因素 的 限制 ,难以 进行 全 面 的 
测试 。 

(3) 如 果 修 正 缺 陷 所 需 时 间 稍 长 ,那么 想 将 手工 测试 应 用 于 回归 测试 将 变 得 异常 困难 。 
这 是 因为 需要 测试 的 测试 用 例 太 多 。 

(4) 对 测试 过 程 中 发 现 的 大 量 缺 陷 缺 乏 科学 、 有 效 的 管理 手段 ,责任 变 得 含混 不 清 , 没 
有 人 能 向 决策 层 提供 精确 的 数据 以 度量 当前 的 工作 进度 及 工作 效率 。 这 样 往往 会 导致 最 后 
的 汇总 报表 数据 不 准确 。 

(5) 反复 测试 带 来 的 倦怠 情绪 及 其 他 人 为 因素 使 得 测试 标准 前 后 不 一 ,测试 花费 的 时 
间 越 长 ,测试 的 严格 性 也 就 越 低 。 

(6) 难以 对 不 可 视 对 象 或 对 象 的 不 可 视 属性 进行 测试 。 

2) 自动 化 测试 的 特点 

(1) 可 以 运行 更 多 更 频繁 的 测试 用 例 。 

(2) 可 以 执行 一 些 手工 测试 困难 或 者 不 可 能 做 的 测试 。 如 对 不 可 视 对 象 的 测试 ,利用 
面向 对 象 的 自动 化 测试 脚本 就 很 容易 实现 。 

(3) 可 以 更 好 地 利用 资源 。 在 夜间 执行 自动 测试 用 例 。 

(4) 测试 具有 移植 性 和 可 重复 性 。 好 的 测试 脚本 往往 具有 较 好 的 平台 移植 性 。 

(5) 可 以 更 快 地 将 软件 推 向 市 场 。 因 为 自动 测试 节省 了 大 量 的 时 间 。 

但 是 自动 化 测试 要 求 的 先期 投入 比较 大 ,而 且 要 求人 员 必 须 经 过 严格 的 培训 。 

所 以 手工 测试 和 自动 化 测试 各 自 适用 的 场合 如 下 。 

CD 测试 很 少 执行 的 项 目 。 当 测试 用 例 执行 频 度 太 小 时 (一 年 一 次 ), 可 以 直接 使 用 手 
工 测 试 。 

(2) 软件 运行 仍然 不 稳定 时 ,适合 使 用 手工 测试 。 

(3) 测试 结果 很 容易 通过 人 验证 的 测试 项 目 适合 手工 测试 。 

(4) 测试 项 目 中 涉及 物理 交互 比较 多 的 时 候 适 合 手工 测试 。 如 需要 经 常 查看 打印 机 ， 
绘图 仪 的 输出 时 。 

(5) 软件 维护 时 使 用 的 回归 测试 适合 自动 化 测试 。 

(6) 执行 压力 测试 时 适合 自动 化 测试 。 例 如 ,测试 服务 器 的 最 大 访问 上 限 等 。 

(7) 配置 和 兼容 性 测试 等 项 目 适 合 自动 化 测试 。 
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8. 案例 演示 和 总 结 


在 一 个 实时 的 项 目 监 控 的 系统 中 ,客户 通过 手机 或 固定 电话 拨号 完成 数据 的 输入 , 当 接 
收 到 的 号 码 一 旦 与 已 知 设 定 不 符合 ,触发 报警 系统 ,在 打印 该 输入 号 码 同 时 还 要 将 它 转 存 到 
磁带 上 。 

测试 分 析 : 在 该 项 目 中 ,需要 对 客户 号 码 、 报 警 器 ,还 有 输出 设备 (打印 机 和 磁带 机 ) 这 
三 个 方面 进行 测试 。 再 进一步 分 析 我 们 知道 ,对 于 电话 号 码 而 言 可 能 有 很 多 的 形式 ,但 是 无 
论 如 何 , 它 们 的 值 一 定 是 数字 组 成 的 ,对 接收 方 来 说 ,只 有 两 种 情况 , 收 到 了 合法 的 数据 和 收 
到 非法 的 数据 。 所 以 它 适合 使 用 程序 来 模拟 输入 数据 和 根据 输入 判断 预期 的 输出 结果 ,可 
以 使 用 自动 化 的 方式 来 实现 。 对 报警 器 而 言 , 它 只 有 两 种 状态 : 报警 或 不 报警 。 所 以 同样 
可 以 用 合法 的 数据 来 触发 报警 和 使 用 非法 数据 来 测试 判断 其 是 不 是 不 报警 。 所 以 同样 可 以 
实现 自动 化 。 再 看 第 三 个 测试 对 象 , 输 出 设备 的 测试 ,如 前 面 所 述 ,对 于 这 种 物理 设备 的 测 
试 只 能 使 用 手工 测试 。 

从 上 面 的 这 个 简单 的 例子 中 可 以 看 到 ,在 任何 一 个 项 目 中 ,完全 的 手工 测试 和 自动 化 测 
试 都 是 不 可 取 的 ,可 以 将 那些 重复 频 度 大 ,测试 输入 容易 使 用 程序 来 模拟 和 测试 结果 可 以 预 
期 的 测试 可 以 使 用 自动 化 的 方式 来 实现 。 对 于 那些 涉及 物理 交互 的 测试 用 例 还 是 使 用 手工 
方式 为 好 。 总 体 而 言 ,手工 测试 和 自动 化 测试 是 相互 补充 的 。 在 一 个 具体 的 项 目 中 ,到 底 谁 
占 重要 的 部 分 ,这 要 根据 实际 的 项 目 来 确定 ,而 不 能 人 为 主观 限定 。 同 时 需要 注意 的 是 ,在 
目前 的 实际 应 用 中 大 多 数 的 自动 化 测试 所 使 用 的 测试 用 例 是 从 手工 测试 提取 而 来 的 ,所 以 
一 定 要 注意 对 那些 手工 测试 用 例 的 抽象 化 ,否则 会 导致 自动 测试 脚本 中 输入 数据 有 遗漏 , 造 
成 测试 输入 不 完全 ,这 样 就 会 导致 测试 项 目的 失败 。 

总 而 言 之 ,在 现代 的 软件 开发 项 目的 测试 中 ,不 存在 一 个 项 目 完 全 是 使 用 哪 一 种 方法 来 
独立 完成 整个 项 目的 测试 ,这 是 不 可 能 的 。 只 可 能 是 两 种 方法 同时 并 重 或 者 一 个 为 主 , 一 个 
为 辅 。 


(e sm 


1. 自动 化 测试 有 什么 优点 ? 

2. 自动 化 测试 的 基本 原则 是 什么 ? 
3. 简 述 自动 化 测试 的 实现 基本 策略 。 
4. 自动 化 测试 工具 如 何 选择 ? 
5 
6 


. 请 列 出 手工 测试 和 自动 化 测试 的 差异 点 。 
. Rational TestManager 提供 了 哪 几 种 测试 ? 
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敏捷 软件 开发 是 目前 在 业界 十 分 流行 的 软件 开发 模式 。 与 传统 的 软件 开发 模式 有 所 不 
V] ,敏捷 开发 模式 有 着 自己 鲜明 的 特征 。 而 且 , 敏 捷 测试 部 分 也 同 以 往 的 软件 测试 流程 有 所 
不 同 。 这 对 测试 人 员 提 出 了 新 的 要 求 , 带 来 了 新 的 挑战 。 本 章 将 结合 一 个 软件 项 目 实例 , 基 
于 项 目 开 发 的 不 同 阶段 ,介绍 每 个 阶段 的 主要 测试 活动 。 文 中 将 分 析 每 个 主要 测试 活动 的 
前 提 条 件 和 目标 任务 ,并 根据 实例 推荐 最 佳 的 解决 方案 。 


本 章 学 习 重 点 


。 了 解 敏捷 开发 的 流程 。 
* 熟悉 敏捷 测试 人 员 的 素质 和 职责 。 
° 掌握 敏捷 开发 中 的 测试 流程 。 


本 章 学 习 难 点 
掌握 化 捷 开发 中 的 测试 流程 。 


6.1 敏捷 软件 开发 简介 


敏捷 软件 开发 (Agile Software Development) E W F 20 世纪 90 年 代 中 期 。 最 早 是 为 
了 与 传统 的 瀑布 软件 开发 模式 (Waterfall Model) 相 比较 ,所 以 当时 的 方法 叫 作 轻 量 级 方法 
(Lightweight Methods), 20 世纪 初 ,该 方法 的 17 位 倡导 者 建立 了 敏捷 联盟 (Agile 
Alliance) ,并 将 该 软件 开发 方法 命名 为 敏捷 软件 开发 过 程 。 

敏捷 联盟 在 成 立 之 初 就 总 结 了 以 下 4 条 基本 的 价值 原则 。 

(1) 人 员 交 流 重 于 过 程 与 工具 (Individuals and interactions over processes and tools) 。 

(2) 软件 产品 重 于 长 篇 大 论 (Working software over comprehensive documentation) 。 

(3) 客户 协作 重 于 合同 谈判 (Customer collaboration over contract negotiation ) 。 

(4) 随机 应 变 重 于 循规蹈矩 (Responding to change over following a plan) 。 

基于 这 4 条 原则 ,敏捷 软件 开发 有 着 自己 独特 的 流程 ,如 图 6-1 所 示 。 
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图 6-1 敏捷 软件 开发 流程 


整个 过 程 中 融合 了 很 多 在 敏捷 开发 前 已 经 出 现 的 软件 开发 方法 ,包括 极限 编程 
(Extreme Programming) 、Scrum、 特 征 驱 动 开 发 (Feature Driven Development) ,测试 驱动 
开发 (Test Driven Development) 等 。 这 些 方法 在 敏捷 软件 开发 流程 的 各 个 阶段 都 有 充分 的 
体现 和 应 用 。 

例如 ,Scrum 主要 着 重 于 项 目 管理 ,团队 中 的 项 目 经 理 (Scrum Master) 需 要 在 获取 到 客 
户 需求 后 制定 Sprint 的 周期 ,定义 每 个 Sprint 的 目标 、 分 派 任务 .进行 监督 ,最 后 总 结 得 失 
并 开始 计划 新 的 Sprint。 

相反 ,特征 驱动 开发 和 测试 驱动 开发 主要 被 应 用 于 Sprint 周期 中 。 如 果 项 目 处 于 开发 
新 功能 时 期 ,这 个 阶段 主要 推行 特征 驱动 开发 。 所 有 开发 人 员 和 测试 人 员 都 将 自己 的 工作 
重心 放 在 新 的 功能 上 面 ,从 开发 和 测试 两 个 方面 来 完成 各 自 的 任务 。 如 果 项 目 处 于 测试 新 
功能 时 期 ,这 个 阶段 需要 将 工作 的 重点 转移 到 测试 上 来 。 所 有 开发 人 员 和 测试 人 员 都 密切 
关注 着 目前 版 本 的 缺陷 状况 。 测 试 人 员 需 要 在 每 天 的 站 立会 议 (Daily Standup Meeting) E 
报告 前 一 个 工作 日 发 现 的 新 缺陷 情况 ,项目 经 理 根据 项 目 进度 和 缺陷 严重 性 来 决定 是 否 修 
复 这 些 问题 。 需 要 及 时 修复 的 缺陷 是 目前 Sprint 中 的 一 个 新 任务 ,将 由 项 目 经 理 添 加 到 
Sprint Backlog 上 并 通知 开发 人 员 去 修复 漏洞 。 

对 于 敏捷 开发 和 测试 中 的 审查 过 程 ,极限 编程 中 的 同行 评审 (Peer Review) 思 想得到 了 
充分 应 用 。 代 码 和 文档 的 审查 追求 简单 而 高 效 。 团 队 成 员 两 两 组 成 一 对 ,互相 评审 ; 有 时 
Ai ,一 个 开发 人 员 和 一 个 测试 人 员 也 可 以 组 成 一 对 ,互相 协作 。 这 样 能 够 有 助 于 缺陷 和 问题 
在 第 一 时 间 被 扼杀 在 萌芽 之 中 。 

敏捷 开发 还 有 以 下 几 个 关键 概念 (Key Issues): 迭代 过 程 (Iterative Process); 用 户 故 
事 (User Stories); 任务 (Tasks); 站 立会 议 (Standup Meeting); 持续 集成 (Continuous 
Integration); 最 简 方案 (Simplest Solutions); 重 构 (Re-factoring)。 这 些 概念 是 敏捷 开发 
中 经 常 使 用 到 的 观点 和 方法 。 
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6.2 敏捷 开发 中 的 测试 人 员 


本 节 将 简要 介绍 敏捷 开发 中 测试 人 员 所 需要 具备 的 素质 和 职责 。 
1. 敏捷 开发 团队 介绍 


例如 ,敏捷 开发 团队 由 4 位 开发 人 员 、 两 位 测试 人 员 一 位 产品 设计 人 员 一 位 项 目 经 理 
和 一 位 产品 经 理 组 成 。 每 天 早上 十 点 ,在 固定 的 时 间 和 会 议 室 里 面 ,团队 会 举行 站 立会 议 。 
这 时 候 , 团 队 成 员 按照 既定 的 顺序 向 项 目 经 理 汇报 各 自前 一 天 完成 的 任务 ,所 遇 到 的 困难 和 
当天 要 完成 的 任务 。 同 时 ,项 目 经 理 更 新 Sprint Backlog( 一 张 制 作 精良 的 Excel 表格 ) ,并 
及 时 解决 每 个 人 所 提出 的 问题 。 

由 于 敏捷 开发 要 求 参与 人 能 够 快速 而 高 效 地 应 对 变化 ,所 以 无 形 中 对 测试 人 员 提 出 了 
很 高 的 要 求 。 


2. 测试 人 员 需 要 具备 的 素质 


测试 是 软件 开发 中 不 可 或 缺 的 一 部 分 。 在 敏捷 软件 开发 中 也 是 如 此 。 不 同 的 组 织 给 测 
试 人 员 以 不 同 的 称号 : 测试 开发 人 员 (Test Developer)、 质 量 分 析 员 (Quality Analyst) 、 软 
件 质 量 工程 师 (Software Quality Engineer) 等 。 

每 个 称号 隐 含 不 同 的 职能 。 以 上 的 称号 分 别 对 应 以 下 的 能 力 要 求 。 

CD 具有 质量 检测 和 编写 代码 的 能 力 一 测试 开发 人 员 。 

(2) 具有 防止 缺陷 (Quality Assurance) 和 质量 控制 (Quality Control) 的 能 力 一 质量 分 
析 员 。 

(3) 具有 开发 和 执行 测试 程序 的 能 力 一 软件 质量 工程 师 。 

总 而 言 之 ,有 三 方面 的 基本 素质 要 求 : 代码 编写 (Coding)、 测试 (Testing) 和 分 析 
(Analysis), 

在 很 多 其 他 的 开发 流程 中 ,各 个 测试 阶段 对 测试 人 员 的 能 力 有 所 不 同 : 有 时 侧重 分 析 
(例如 系统 配置 测试 ) ,有 时 侧重 代码 编写 (例如 功能 测试 ) 。 但 是 ,在 敏捷 开发 流程 中 ,测试 
人 员 需 要 结合 这 三 方面 来 开展 工作 ,只 有 这 样 才 能 真正 反映 敏捷 测试 的 本 质 : 简单 而 高 效 
地 应 对 变化 。 


3. 测试 人 员 的 主要 职责 


在 敏捷 软件 开发 中 ,测试 人 员 的 职责 有 以 下 三 个 主要 方面 。 

CD 定义 质量 (Define Quality); 这 应 该 是 软件 测试 人 员 的 基本 职责 。 敏 捷 方法 鼓励 测 
试 人 员 在 Sprint 计划 时 直接 与 客户 交流 ,从 自己 的 经 验 出 发 ,共同 为 产品 功能 制定 质量 

(2) 交流 缺陷 (Communication) : 敏捷 过 程 强 调 团 队 中 的 交流 。 开 发 人 员 经 常会 专注 
于 重要 而 新 奇 的 功能 ,测试 人 员 应 该 抓 住 细节 ,寻找 设计 中 的 “missing door”; 另外 ,开发 人 
员 使 用 单元 测试 来 保证 产品 的 基本 质量 .测试 人 员 可 以 使 用 验收 测试 (Acceptance Test) 来 
鉴定 客户 需求 与 实际 成 果 之 间 的 不 一 致 性 。 
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(3) 及 时 反馈 (Feedback) : 敏捷 过 程 强调 简单 而 高 效 。 测 试 人 员 需 要 及 时 反馈 产品 目 
前 的 质量 问题 。 这 样 一 来 ,团队 才 可 以 立刻 着 手 解决 。 如 果 传 统 的 流程 是 一 周 汇总 一 次 状 
态 ,敏捷 流程 要 求 每 天 汇总 质量 问题 。 例 如 ,在 项 目 中 ,内 部 的 测试 报告 以 网 页 的 形式 显示 
在 内 部 站 点 上 ,每 个 团队 成 员 能 够 随时 获取 ; 另外 ,测试 框架 提供 自助 测试 (Self-assistant 
Test): 通过 单 击 测试 用 例 列表 中 的 某 个 具体 用 例 , 开 发 人 员 不 需要 中 断 测试 人 员 的 工作 就 
可 以 重 现 缺 陷 。 


6.3 敏捷 开发 中 的 测试 流程 


本 节 介绍 敏捷 测试 的 最 佳 实践 ,详细 介绍 项 目 流程 中 的 主要 测试 活动 .每 个 活动 的 前 提 
条 件 和 目标 任务 等 。 

1. 典型 的 敏捷 开发 和 测试 活动 

典型 的 敏捷 开发 和 测试 活动 见 表 6-1。 它 主要 由 三 部 分 构成 ,从 最 初 的 用 户 故事 设计 
和 发 布 计 划 , 到 几 次 Sprint 周期 的 迭代 开发 和 测试 ,以 及 最 后 的 产品 发 布 阶段 。 每 个 时 间 
段 都 有 相应 的 测试 活动 。 通 常 Sprint 周期 被 分 成 两 类 : 特征 周期 (Feature Sprint) 和 发 布 
周期 (Release Sprint) 。 特 征 周期 主要 涉及 新 功能 的 开发 和 各 类 测试 。 发 布 周期 则 会 结合 
计划 ,确定 新 版 本 功能 ,然后 对 最 新 的 功能 进行 测试 。 

表 6-1 敏捷 开发 的 主要 活动 和 测试 活动 


敏捷 开发 的 主要 活动 测试 活动 

用 户 故 事 设计 寻找 隐藏 的 假设 

发 布 计划 设计 概要 的 验收 测试 用 例 
和 迭代 Sprint 估算 验收 测试 时 间 
编码 和 单元 测试 估算 测试 框架 的 搭建 
重 构 详细 设计 验收 测试 用 例 
集成 编写 验收 测试 用 例 
执行 验收 测试 重 构 验 收 测试 

Sprint 结束 执行 验收 测试 

下 一 个 Sprint 开始 执行 回归 测试 

发 布 发 布 


在 迭代 的 Sprint 周期 中 ,开发 部 分 可 以 根据 传统 步骤 分 成 编码 和 单元 测试 . 重 构 和 集 
成 。 需 要 指出 的 是 , 重 构 和 集成 是 敏捷 开发 的 Sprint 迭代 中 不 可 忽视 的 任务 。 如 果 在 新 的 
Sprint 周期 中 要 对 上 次 的 功能 加 以 优化 和 改进 ,必然 离 不 开 重 构 和 集成 。 

在 每 个 Sprint 周期 结束 前 ,测试 团队 将 提交 针对 该 Sprint 周期 或 者 上 个 Sprint 周期 中 
已 完成 的 功能 的 验收 测试 (在 实际 项 目 中 ,测试 团队 的 进度 通常 会 晚 于 开发 团队 的 进度 ) 。 
这 样 一 来 ,开发 团队 可 以 通过 验收 测试 来 验证 所 开发 的 功能 目前 是 否 符合 预期 目标 。 当 然 ， 
这 个 预期 也 是 在 迭代 中 不 断 变 化 和 完善 的 。 

当 产 品 的 所 有 功能 得 以 实现 ,测试 工作 基本 结束 后 ,就 进入 了 发 布 周 期 。 此 时 ,测试 团 
队 的 任务 相对 较 多 。 
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以 上 概述 了 敏捷 开发 的 主要 活动 。 下 面 将 对 各 阶段 相应 的 测试 活动 做 详细 的 介绍 和 分 
析 。 首 先是 用 户 故事 设计 和 发 布 阶段 。 


2. 用 户 故 事 设计 和 发 布 计划 阶段 


在 用 户 故 事 和 发 布 计划 阶段 ,项 目 经 理 和 产品 经 理会 根据 客户 的 需求 ,制定 概要 的 产品 
发 布 日 程 计划 。 此 时 ,测试 人 员 可 以 和 开发 人 员 一 起 学 习 新 的 功能 ,了 解 客 户 的 需求 。 其 
中 ,有 两 个 主要 活动 : 寻找 隐藏 的 假设 和 设计 概要 的 验收 测试 用 例 。 

1) 寻找 隐藏 的 假设 

正如 前 文 所 述 , 开 发 人 员 通 常 关 注 一 些 重要 的 系统 功能 而 忽视 细节 。 此 外 ,敏捷 开发 倡 
导 简单 的 实现 方案 ,每 个 开发 Sprint 周期 不 可 能 将 功能 完美 地 实现 ; 相反 ,每 个 Sprint 都 会 
增 量 地 开发 一 些 功能 。 所 以 ,测试 人 员 在 最 初 就 需要 从 各 种 角度 来 寻找 系统 需求 ,探索 隐藏 

2) 设计 概要 的 验收 测试 用 例 

定义 完 一 系列 用 户 故事 后 ,测试 人 员 就 可 以 着 手 设计 概要 的 验收 测试 用 例 。 正 如 前 文 
论述 ,不 同 于 单元 测试 ,验收 测试 检查 系统 是 否 满足 客户 的 预期 ,也 就 是 用 户 故 事 是 否 能 够 
实现 。 于 是 ,测试 人 员 可 以 根据 每 条 用 户 故 事 来 扩展 ,寻找 其 中 的 “动作 ”, 然 后 为 每 条 “ 动 
作 ” 制 定 正 例 和 反例 。 


3. 和 迭代 Sprint 阶段 


当 一 个 Sprint 周期 正式 开始 时 ,项 目 经 理 将 制定 该 周期 的 具体 开发 和 测试 任务 。 在 定 
期 的 Sprint 计划 会 议 (Planning Meeting) 上 ,每 位 团队 成 员 都 要 提供 自己 在 未 来 一 个 Sprint 
周期 中 的 休假 和 培训 计划 。 另 外 ,每 个 团队 可 以 根据 各 自 团队 成 员 的 能 力 和 工作 经 验 ,适当 
设 定 一 个 工作 负载 值 (Load Factor)。 例 如 ,团队 的 工作 负载 值 为 75%, 也 就 是 说 每 个 人 平 
均 每 天 工作 6h( 以 8h 计算 ) 。 接 着 就 可 以 开始 分 配 任务 。 

当 开发 团队 开始 编码 和 单元 测试 时 ,测试 人 员 的 工作 重点 包括 估算 验收 测试 的 时 间 、 估 
算 测试 框架 的 搭建 .详细 设计 验收 测试 和 编写 验收 测试 代码 。 前 两 个 主要 活动 一 般 在 项 目 
初期 的 Sprint 周期 中 完成 。 其 他 主要 活动 将 在 接 下 来 的 多 个 Sprint 周期 中 视 情 况 迭 代 进 
行 。 下 面 将 具体 介绍 每 个 主要 活动 。 

1) 估算 验收 测试 时 间 

在 软件 开发 初期 ,需要 估算 时 间 以 制定 计划 。 这 一 点 在 敏捷 开发 中 应 用 更 加 广泛 。 如 
果 以 前 的 开发 模式 需要 测试 人 员 估 算 一 个 软件 版 本 发 行 的 计划 (这 样 的 计划 通常 会 延续 几 
个 月 ) ,那么 现在 则 要 在 每 个 Sprint 机 会 会 议 上 估算 两 周到 一 个 月 的 任务 。 此 外 ,在 每 天 的 
站 立会 议 上 ,测试 人 员 需 要 不 断 地 更 新 自己 的 估算 时 间 ,以 应 对 变化 的 需求 。 所 以 ,每 个 测 
试 人 员 都 应 该 具备 一 定 的 估算 任务 能 力 。 下 面 将 介绍 两 个 通用 的 估算 测试 计划 的 方法 。 

(1) 快速 而 粗糙 的 方法 

从 经 验 而 言 ,测试 通常 占 项 目 开发 的 三 分 之 一 时 间 。 如 果 一 个 项 目 开发 估计 要 30 人 
天 ,那么 测试 时 间 为 10 人 天 。 

(2) 细致 而 周到 的 方法 

这 个 方法 从 测试 任务 的 基本 步骤 出 发 ,进行 详细 分 类 。 其 中 包括 : 
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CD 测试 的 准备 (设计 测试 用 例 \、 准 备 测试 数据 ,编写 自动 测试 代码 并 完善 代码 ) ; 

© 测试 的 运行 (建立 环境 、 执 行 测试 .分 析 和 汇报 结果 )， 

@ 特殊 的 考虑 。 

2) 估算 测试 框架 的 搭建 

测试 框架 是 自动 测试 必 不 可 少 的 一 部 分 工作 。 由 于 敏捷 开发 流程 倡导 快速 而 高 效 地 完 
成 任务 ,这 就 要 求 一 定 的 自动 测试 率 。 一 个 完善 的 测试 框架 可 以 大 大 提高 测试 效率 ,及 时 反 
馈 产品 的 质量 。 

在 敏捷 开发 流程 中 ,在 第 一 个 Sprint 周期 里 ,需要 增加 一 项 建立 测试 框架 的 任务 。 在 
随后 的 迭代 过 程 中 ,只 有 当 测 试 框架 需要 大 幅度 调整 时 ,测试 团队 才 需 要 考虑 将 其 单独 作为 
任务 ,否则 可 以 不 用 作为 主要 任务 罗列 出 来 。 

3) 详细 设计 验收 测试 用 例 

完成 对 测试 任务 的 估算 ,接着 就 可 以 着 手 详细 设计 验收 测试 用 例 。 可 以 对 概要 设计 中 
的 测试 用 例 进行 细 化 ,根据 不 同 的 测试 环境 ,测试 数据 以 及 测试 结果 ,编写 更 详细 的 测试 用 
例 。 另 外 ,可 以 结合 几 个 用 例 , 完 成 一 个 复杂 的 测试 操作 。 

由 于 人 敏捷 开发 的 流程 是 不 断 选 代 的 过 程 ,所 以 很 多 复杂 的 功能 可 能 会 在 未 来 的 Sprint 
周期 中 被 优化 。 对 测试 人 员 而 言 ,一 个 有 效 的 方法 是 尽量 将 一 些 验证 基本 功能 的 测试 用 例 
作为 基本 验证 测试 用 例 (Basic Verification Test Case) 在 第 一 时 间 实 现 自动 化 ; 而 对 一 些 复 
杂 的 功能 测试 用 例 ,可 以 先 采 用 手工 的 方法 测试 ,直到 在 未 来 Sprint 周期 中 该 功能 达到 稳 
定时 再 考虑 自动 化 。 此 外 ,对 测试 中 出 现 的 缺陷 可 以 设计 回归 测试 用 例 (Regression Test 
Case) ,为 其 编写 自动 测试 代码 ,使 得 此 类 问题 在 发 布 周期 (Release Sprint) 时 可 以 顺利 而 高 
效 地 进行 验证 。 

4) 编写 验收 测试 用 例 

敏捷 开发 不 提倡 撰写 太 多 的 文档 ,提倡 直接 编写 测试 用 例 。 此 外 ,测试 人 员 和 客户 应 取 
得 良好 的 沟通 ,将 需求 总 结 下 来 ,转化 成 验收 测试 用 例 。 如 果 资 源 充 足 , 最 好 对 验收 测试 用 
例 建立 版 本 控制 机 制 。 

考虑 到 需求 在 每 一 轮 Sprint 周期 中 会 不 断 地 变化 ,测试 团队 要 控制 测试 的 自动 化 率 ， 
正确 估计 未 来 功能 的 增 减 。 自 动 化 率 过 高 会 导致 后 期 大 量 测试 代码 需要 重 构 , 反 而 增加 很 
多 工作 量 。 


4. Sprint 结束 和 下 一 个 Sprint 开始 


在 一 个 Sprint 周期 结束 时 ,团队 要 举行 一 个 回顾 会 议 (Retrospective Meeting)。 团 队 
成 员 可 以 在 会 议 上 畅所欲言 ,指出 在 过 去 一 个 Sprint 周期 中 可 行 的 ,不 可 行 的 和 有 待 改 进 
的 地 方 。 待 改进 之 处 将 在 项 目 经 理 监督 下 于 未 来 的 Sprint 周期 中 实现 。 

由 于 敏捷 开发 倡导 增 量 开发 , 当 新 的 Sprint 开始 时 ,测试 团队 需要 根据 新 Sprint 周期 
的 开发 进度 及 时 重 构 验 收 测试 。 如 果 新 Sprint 周期 没有 具体 的 新 功能 开发 ,测试 团队 可 以 
将 精力 集中 在 执行 验收 测试 和 寻找 缺陷 上 。 

如 果 下 一 个 Sprint 周期 是 发 布 周期 ,那么 测试 人 员 需 要 准备 执行 回归 测试 。 下 面 来 详 
细 了 解 每 个 测试 活动 。 
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1) 重 构 验 收 测试 

正如 上 文 所 提 及 ,敏捷 开发 是 以 迭代 方式 进行 的 ,功能 在 每 次 迭代 中 推陈出新 。 于 是 ， 
验收 测试 用 例 经 常 需要 修改 或 者 添加 ,相应 的 验收 测试 代码 也 需要 删 减 。 这 部 分 工作 如 果 
时 间 花 销 很 大 ,最 好 在 估算 的 时 候 一 并 提出 。 

2) 执行 验收 测试 

验收 测试 可 以 分 为 两 大 类 : 基本 验证 测试 和 功能 测试 。 如 果 是 基本 验证 测试 ,推荐 开 
发 人 员 在 运行 完 单元 测试 和 提交 代码 前 直接 运行 自动 测试 脚本 。 如 果 是 功能 测试 ,可 以 在 
每 个 Sprint 后 期 ,新 功能 代码 提交 后 ,由 测试 人 员 单独 执行 。 

敏捷 开发 的 开发 和 测试 是 相辅相成 的 。 一 旦 基本 验证 测试 出 现 问题 , 那 就 说 明 开 发 人 
员 的 实现 违反 了 最 初 客户 定义 的 需求 ,所 以 不 能 够 提交 。 如 果 功 能 测试 出 现 问题 ,那么 测试 
人 员 就 需要 及 时 与 开发 人 员 沟 通 。 如 果 是 缺陷 , 需 及 时 上 报 给 项 目 经 理 , 并 在 每 天 站 立会 议 
中 提出 ; 如 果 不 是 ,那么 继续 下 一 项 任务 。 这 个 过 程 充 分 体现 了 敏捷 开发 所 提倡 的 团队 交 
流 机 制 。 

3) 执行 回归 测试 

在 发 布 周期 中 ,测试 人 员 所 肩负 的 任务 非常 重要 ,因为 这 是 产品 发 布 前 的 最 后 质量 
检验 。 

首先 ,要 建立 一 套 自动 生成 build、 运 行 自 动 测试 代码 ,手工 执行 测试 用 例 并 汇总 测试 结 
果 的 框架 。 估 算 方法 参见 上 文 。 

其 次 ,定期 执行 各 类 测试 ,包括 功能 测试 和 系统 测试 。 

最 后 ,要 整理 之 前 在 每 个 特征 测试 周期 中 出 现 的 问题 。 如 果 已 经 整理 并 归 类 为 回归 测 
试用 例 , 那 么 只 要 定时 执行 就 可 以 了 ; 否则 ,就 需要 一 一 添加 。 如 果 用 例 已 经 被 自动 化 ,可 
以 直接 运行 ; 如 果 是 手工 测试 ,测试 人 员 需 要 按照 测试 用 例 进行 操作 ,最 后 汇总 测试 结果 。 
这 部 分 测试 就 是 所 谓 的 回归 测试 。 


5. 手工 测试 和 测试 报告 


手工 测试 和 自动 测试 是 两 个 主要 的 测试 类 型 。 考 虑 到 敏捷 开发 的 高 效 性 ,自动 测试 会 
优 于 手工 测试 。 手 工 测试 有 两 个 主要 的 缺点 : 不 可 靠 和 容易 被 遗忘。 敏捷 测试 主张 一 些 基 
本 的 验收 测试 可 以 被 自动 化 ; 对 一 些 涉及 系统 方面 的 测试 ,手工 测试 比较 适合 。 

测试 报告 是 反映 一 个 测试 团队 工作 的 最 好 成 果 。 为 适应 敏捷 开发 的 节奏 ,测试 报告 可 
以 以 网 页 的 形式 发 布 在 内 部 的 Web 服务 器 上 ,在 一 些 问题 区 域 上 标注 鲜明 的 色彩 ,用 来 警 
示 团 队 中 的 每 个 人 。 


6.4 案例 分 析 


本 节 将 结合 一 个 软件 项 目 实例 来 加 深 对 敏捷 测试 的 了 解 。 
1. 项 目 实例 介绍 


根据 一 家 在 线 B2B 公司 的 要 求 ,将 为 其 开发 一 款 类 似 于 百度 的 搜索 服务 。 作 为 Web 
Service, 该 服务 可 以 内 嵌 于 网 页 之 中 。 当 用 户 输 入 关键 词 并 选择 商户 的 类 型 和 位 置 后 , 系 
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统 会 返回 具体 商户 的 列表 。 
2. 用 户 故 事 设 计 和 发 布 计划 阶段 


1) 寻找 隐藏 的 假设 

(1) 从 在 线 B2B 公司 角度 思考 

问 : 这 个 搜索 框 对 公司 的 业务 有 什么 价值 ? 

答 : 搜索 框 可 以 为 用 户 方便 地 提供 商户 的 目录 信息 。 如 果 越 来 越 多 的 用 户 使 用 这 个 搜 
索 框 ,可 以 增加 网 站 的 访问 量 。 

(2) 从 用 户 角度 思考 

问 : 作为 查询 信息 、 寻 找 商 业 合 作 伙 伴 的 网 站 用 户 ,搜索 框 对 我 有 什么 好 处 ? 

答 : 坏处 : 找到 一 家 商户 的 地 址 ,过 去 才 发 现 已 经 关门 软 业 。 好 处 ; 查找 商户 很 简单 ， 
只 要 单 击 鼠标 。 不 快 : 有 时 候 在 寻找 一 类 商户 , 却 记 不 清楚 具体 名 字 。 

(3) 从 程序 员 角 度 思考 

问 : 一 个 搜索 框 的 最 简单 实现 方法 是 什么 ? 

答 : 一 个 由 text input 和 search button 组 成 的 form; 后 台 通 过 server 程序 将 符合 类 型 
和 地 址 的 商户 名 从 数据 库 中 取出 ,返回 给 用 户 ; 每 个 返回 项 包括 商户 的 名 称 、 地 址 和 评价 

(4) 寻找 这 些 观 点 中 的 问题 

Jo]; 搜索 框 如 何在 用 户 忘记 具体 名 字 的 时 候 提醒 用 户 ? 

答 : 在 第 一 版 本 中 实现 比较 困难 。 可 以 让 用 户 输入 至 少 一 个 类 型 来 提高 模糊 查找 的 

(5) 最 后 寻找 到 隐藏 的 假设 

以 上 的 思考 让 测试 人 员 对 系统 的 隐 含 假设 更 加 清晰 : 首先 ,系统 应 该 能 够 在 高 峰 时 候 
处 理 300 条 搜索 请 求 和 2000 个 鼠标 单 击 事件 。 其 次 :用户 可 以 在 已 经 查找 到 的 内 容 中 继续 
查找 。 最 后 ,系统 提供 一 个 商户 类 别 清单 ; 如 果 用 户 选择 商户 类 别 而 忘记 具体 名 字 , 系 统 提 
供 模糊 查询 。 

在 敏捷 开发 中 ,这 些 假 设 可 以 作为 用 户 故事 记录 下 来 ,从 而 指导 未 来 系统 的 开发 和 测试 。 

2) 设计 概要 的 验收 测试 用 例 

设计 概要 的 验收 测试 用 例如 表 6-2 所 示 。 


表 6-2 设计 概要 的 验收 测试 用 例 


动作 数 据 期 待 的 结果 
搜索 一 组 能 成 功 搜索 到 的 (类 别 , 位 置 ) 数 据 在 该 类 别 和 位 置 条 件 下 的 一 组 商户 信息 
搜索 一 组 不 能 成 功 搜索 到 的 (类 别 ,位 置 ) 数 据 空 列表 


3. ÆR Sprint 阶段 


1) 估算 验收 测试 时 间 
搜索 框 的 开发 估计 需要 78 人 天 完成 。 但 是 ,考虑 到 系统 有 模糊 搜索 的 功能 ,所 以 测试 
任务 可 能 会 占 40% 左 右 ,大 概 31 人 天 。 表 6-3 列 出 了 具体 的 任务 和 估计 时 间 。 
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表 6-3 具体 任务 及 估计 时 间 


t 5 估计 时 间 
设计 测试 用 例 ,准备 测试 数据 (搜索 数据 集 ) 8 
加 载 数据 集 2 
编写 自动 测试 代码 18 
执行 测试 和 汇报 结果 3 
总 结 31 
估算 单个 测试 任务 的 事例 见 表 6-4. 
表 6-4 ”估算 单个 测试 任务 的 事例 
测试 准备 运行 特殊 考虑 | 估算 
1 设计 测试 用 例 0.5 建立 环境 0.1 
准备 测试 数据 0.5 执行 测试 0.1 
编写 自动 测试 代码 0.5 分 析 结 果 0.1 
完善 自动 测试 代码 2.5 汇报 结果 0.1 
合计 4 0.4 0 4.4 


估算 多 个 测试 任务 的 汇总 见 表 6-5。 
表 6-5 估算 多 个 测试 任务 


测试 任务 
准备 运行 特殊 考虑 估算 
编号 
1 4 0.4 0 4.4 
2 4 0.4 0 4.4 
3 12 4.5 8.5 25 
4 4 0.4 0 4.4 
5 4 0.4 0 4.4 
6 4 0.4 0 4.4 
7 4 0.4 0 4.4 
合计 51.4 


2) 估算 测试 框架 的 搭建 
考虑 该 项 目 刚刚 进入 测试 ,需要 为 此 建立 一 个 测试 框架 , 见 表 6-6。 于 是 ,在 原先 的 估 
算 中 多 增加 一 些 任务 。 


表 6-6 ”测试 框架 
t * 估算 /h 
选择 测试 工具 3 
建立 测试 系统 3 
编写 下 载 . 存 放 和 恢复 测试 数据 的 脚本 2 
寻找 或 建立 测试 结果 汇报 工具 8 
设计 具体 的 搜索 测试 用 例 4 
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续 表 
任 务 估算 /h 
准备 搜索 测试 数据 4 
编写 和 测试 “搜索 ”模块 3 
编写 和 测试 “验证 返回 列表 ”的 模块 1 
学 习 “ 在 结果 中 搜索 ”的 模块 设计 4 
编写 和 测试 “在 结果 中 搜索 ”模块 4 
第 一 次 执行 测试 4 
分 析 第 一 轮 测试 结果 4 
第 二 次 执行 测试 4 
分 析 第 二 轮 测试 结果 4 
合计 52 
3) 详细 设计 验收 测试 用 例 
基本 验证 测试 用 例如 表 6-7 所 示 。 
表 6-7 基本 验证 测试 用 例 
动作 数 m 期 待 的 结果 
用 户 名 : C) a » 
登录 $E. CD 用 户 名 和 密码 无 效 
功能 测试 用 例如 表 6-8 所 示 。 
表 6-8 功能 测试 用 例 
动作 数 E 期 待 的 结果 
登录 正确 的 用 户 名 和 密码 进入 系统 : 请 输入 搜索 条 件 并 单 击 “搜索 ”按钮 
搜索 错误 的 类 型 提示 正确 的 类 型 
搜索 使 用 正确 的 类 型 商户 列表 


4) 编写 验收 测试 用 例 
测试 人 员 和 客户 取得 良好 的 沟通 后 ,将 需求 总 结 下 来 ,直接 转化 成 验收 测试 用 例 , 并 对 
验收 测试 用 例 建立 版 本 控制 机 制 。 此 外 ,还 要 控制 测试 的 自动 化 率 。 


4. Sprint 结束 和 下 一 个 Sprint 开始 


在 一 个 Sprint 周期 结束 时 ,测试 团队 举行 会 议 进 行 总 结 。 找 出 在 过 去 一 个 Sprint 周期 
中 可 行 的 ,不 可 行 的 和 有 待 改进 的 地 方 。 改 进 之 处 在 项 目 经 理 监 督 下 于 未 来 的 Sprint 周期 
中 实现 。 

1) 重 构 验 收 测试 

修改 或 者 添加 验收 测试 用 例 以 及 相应 的 验收 测试 代码 。 

在 下 一 个 Sprint 周期 中 ,需要 实现 之 前 没有 实现 的 “模糊 查找 ”功能 。 测试 人 员 要 在 新 
的 Sprint 周期 中 更 新 原来 的 验收 测试 用 例 ,在 测试 “搜索 ”模块 中 添加 模糊 查找 测试 。 重 新 
估算 的 测试 任务 见 表 6-9。 
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表 6-9 重新 估算 的 测试 任务 
任务 估计 时 间 
设计 测试 用 例 ,准备 测试 数据 (模糊 搜索 数据 集 ) 2 
加 载 数据 集 A 
编写 自动 测试 代码 3 
执行 测试 和 汇报 结果 2 
合计 g 


2) 执行 验收 测试 

开发 人 员 在 运行 完 单元 测试 和 提交 代码 前 直接 运行 自动 测试 脚本 ,进行 基本 验证 测试 。 
在 每 个 Sprint 后 期 ,新 功能 代码 提交 后 ,由 测试 人 员 单 独 执行 功 能 测试 。 

如 果 功 能 测试 出 现 问 题 ,那么 测试 人 员 就 需要 及 时 与 开发 人 员 沟 通 。 如 果 是 缺陷 , 需 及 
时 上 报 给 项 目 经 理 , 并 在 每 天 站 立会 议 中 提出 ; 如 果 不 是 ,那么 继续 下 一 项 任务 。 

3) 执行 回归 测试 

在 发 布 周期 中 ,测试 人 员 需 要 进行 回归 测试 。 


5. 手工 测试 和 测试 报告 


在 该 搜索 实例 中 ,一 旦 重新 建立 索引 ,那么 先前 在 搜索 文本 中 出 现 的 文字 错误 就 无 法 重 
现 。 另 外 , 当 测 试 人 员 按 部 就 班 地 手工 完成 一 个 一 个 测试 用 例 时 ,他 们 很 容易 遗忘 一 些 特殊 
的 测试 用 例 ,很 多 缺陷 因此 而 被 埋没 。 因 此 一 些 基 本 的 验收 测试 可 以 被 自动 化 ; 对 一 些 涉 
及 系统 方面 的 测试 ,手工 测试 比较 适合 。 

测试 报告 以 网 页 的 形式 发 布 在 内 部 的 Web 服务 器 上 ,在 一 些 问 题 区 域 上 标注 鲜明 的 色 
彩 , 用 来 警示 团队 中 的 每 个 人 。 


你 考题 


. 什么 是 敏捷 软件 开发 ? 

.敏捷 开发 融合 了 哪儿 种 软件 开发 方法 ? 

. 人 敏捷 联盟 在 成 立 之 初 总 结 的 4 条 基本 价值 原则 是 什么 ? 
. 敏捷 开发 中 测试 人 员 所 需要 具备 的 素质 和 职责 是 什么 ? 
. 举例 说 明 项 目 流 程 中 的 主要 测试 活动 有 哪些 。 


an = 0 r — 


。 黑 盒 测 试 工具 与 白 盒 测试 工具 
+ 性 能 测试 工具 与 安全 测试 工具 
+ 测试 管理 工具 


本 章 学 习 重 点 


* 了解 工具 角度 的 分 类 。 
。 掌握 常见 的 测试 工具 的 对 比 情况 。 
° 熟悉 测试 工具 的 选择 方法 。 


本 章 学 习 难 点 
掌握 常见 的 测试 工具 的 对 比 情况 。 
0.1 工具 角度 分 类 


目前 用 于 测试 的 工具 较 多 ,从 测试 应 用 的 角度 看 ,一 般 可 分 为 白 盒 测 试 工具 (动态 测试 、 
静态 测试 ) , 黑 盒 测试 工具 (功能 测试 .性 能 测试 ) ,测试 管理 工具 (测试 流程 管理 、 缺 陷 跟 踪 管 
I ,测试 用 例 管理 ) 等 几 大 类 。 


1. BEAT RE 


白 盒 测 试 主要 是 从 程序 的 内 部 结构 出 发 设计 测试 用 例 ,对 程序 所 有 逻辑 路 径 进 行 测试 ， 
通过 在 不 同 点 检查 程序 的 状态 ,确定 实际 的 状态 ,来 测试 产品 内 部 动作 是 否 按照 设计 规格 说 
明 书 的 规定 正常 进行 ,检验 程序 中 的 每 条 通路 是 否 都 能 按 预定 要 求 正确 工作 。 其 对 应 的 测 
试 工具 也 主要 是 直接 对 代码 进行 分 析 , 针 对 程序 代码 ,程序 结构 、 对 象 .类 层次 等 进行 测试 ， 
测试 中 发 现 的 缺陷 可 以 定位 到 代码 行 . 具 体 的 某 个 变量 。 软 件 自动 化 测试 中 对 白 盒 测试 工 
具 的 选择 主要 应 依据 该 工具 对 开发 语言 的 支持 力度 、 对 嵌入 式 操作 系统 的 支持 力度 、 代 码 的 
覆盖 深度 及 测试 的 可 视 化 。 

白 盒 测试 工具 可 进一步 细 分 为 静态 测试 工具 和 动态 测试 工具 。 静 态 测 试 工具 是 不 运行 
被 测 程序 本 身 , 仅 通过 分 析 或 检查 源 程序 的 语法 、 结 构 \. 过 程 、 接 口 等 来 检查 程序 的 正确 性 。 
具有 代表 性 的 静态 测试 工具 有 Gimpel 公司 的 PC-Lint 和 Compuare 的 DevPartner Studio 
中 的 CodeReview。 动 态 测试 工具 需要 实际 运行 被 测 系 统 ,并 设置 断 点 ,向 代码 生成 的 可 执 
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行文 件 插入 一 些 监测 代码 ,监测 断 点 这 一 时 刻 程 序 运行 的 数据 。 具 有 代表 性 的 动态 测试 工 
具有 IBMRational 公司 的 Purify. Pure Coverage. Quanlify 和 Compuare 公司 的 Error 


Detect,Coverage Analysis,PerformanceAnalysis 。 
2. 黑 盒 测试 工具 


黑 盒 测试 是 在 已 知 产品 所 应 具有 的 功能 的 情况 下 ,通过 测试 来 检测 每 个 功能 能 否 正 常 
使 用 的 测试 工具 。 其 基本 工作 原理 是 利用 脚本 的 录制 和 回放 ,模拟 用 户 的 操作 ,然后 将 被 测 
系统 的 输出 记录 下 来 同 预先 给 定 的 标准 结果 比较 。 测 试 时 完全 不 考虑 程序 内 部 结构 和 内 部 
特性 , 它 只 检查 程序 功能 是 否 按照 需求 规格 说 明 书 的 规定 正常 使 用 ,主要 用 于 软件 确认 测 
试 。 黑 盒 测 试 工具 的 代表 有 IBM Rational 的 TeamTest, Robot. Compuware 公司 的 QA- 
Center. MI 公司 的 QTP,WinRunner 等 工具 。 


3. 测试 管理 工具 


测试 管理 工具 是 指 用 工具 对 软件 的 整个 测试 输入 、 执 行 过 程 和 测试 结果 进行 管理 的 过 
程 。 测 试管 理工 具 通 过 一 个 中 央 数 据 仓库 ,实现 测试 人 员 、 开 发 人 员 或 其 他 IT 人 员 在 异地 
进行 信息 交流 。 从 测试 需求 管理 到 测试 计划 ,测试 日 程 安排 ,测试 执行 到 出 错 后 的 错误 跟 
踪 , 实 现 了 全 过 程 的 自动 化 管理 ,提高 回归 测试 的 效率 ,大 幅 提升 测试 时 间 测试 质量 .用 例 
复 用 ,需求 覆盖 等 。 测 试管 理工 具 的 代表 有 Mercury Interactive 公司 的 TestDirector IBM 
Rational 公司 的 ClearQuest。 


(.2 常见 的 测试 工具 对 比 


1. 白 盒 测试 工具 


白 盒 测试 工具 一 般 是 针对 代码 进行 测试 ,测试 中 发 现 的 缺陷 可 以 定位 到 代码 级 ,根据 测 
试 工具 原理 的 不 同 ,可 分 为 静态 测试 工具 和 动态 测试 工具 。 

D 静态 测试 工具 

静态 测试 工具 直接 对 代码 进行 分 析 , 不 需要 运行 代码 ,也 不 需要 对 代码 编译 链接 ,生成 
可 执行 文件 。 静 态 测 试 工具 一 般 是 对 代码 进行 语法 扫描 , 找 出 不 符合 编码 规范 的 地 方 ,根据 
某 种 质量 模型 评价 代码 的 质量 ,生成 系统 的 调用 关系 图 和 等。 静态 测试 工具 的 代表 有 
Telelogic 公司 的 Logiscope 软件 .PR 公司 的 PRQA 软件 等 。 

(1) (Telelogic)Logiscope 

功能 : Logiscope 分 为 Audit、RuleChecker 和 TestChecker 三 部 分 ,对 代码 分 别 进行 静 
态度 量 、 编 程 风格 检测 和 测试 覆盖 率 分 析 。 下 面 分 别 就 这 三 部 分 功能 进行 描述 。 

(D Audit; 以 ISO 9126[3] 模 型 作为 质量 评价 模型 的 基础 。 质 量 评价 模型 描述 了 从 
Halstead, McCabe 的 度量 方法 学 和 Verilog 引入 的 质量 方法 学 中 的 质量 因素 (可 维护 性 、 可 
重用 性 等 ) 和 质量 准则 (可 测试 性 、 可 读 性 等 )。 

@ RuleChecker: 使 用 所 选 规则 对 源 代码 一 一 进行 验证 ,指出 所 有 不 符合 编程 规则 的 代 
码 ,并 对 应 所 违反 的 规则 。 


© TestChecker: 测试 覆盖 率 分 析 工 具 ,提供 : 指令 覆盖 、 判 定 覆盖 `MC/VDC( 条 件 组 合 
GL HET HARI] PPP 覆盖 。 分 析 这 些 覆 盖 率 信息 可 以 保证 测试 ,提高 测试 效率 ,协助 

进行 进一步 的 测试 。 

同时 ,Logiscope 支持 对 嵌入 式 系统 的 覆盖 率 分 析 。 首 先 对 应 用 源 代 码 插 装 ,然后 实时 
地 将 测试 信息 通过 网 线 / 串 口传 到 宿主 机 (Host) 上 ,并 在 线 显 示 。Logiscope 支持 
VxWorks,pSOS, VRTX 等 实时 操作 系统 。 

支持 语言 : 

C,C++ , Ada, Java. 

是 否 免费 : T 

(2) (PR)PRQA 

功能 : PRQA 的 主要 产品 包括 : QAC/QAC++, QA. MISRA C/QA.MISRA C++, 
QAC/QAC+t+ 是 用 于 代码 规则 检查 的 自动 化 工具 。 

主要 功能 : 支持 C,C++,Java fll FORTRAN 应 用 的 静态 分 析 ; 确定 并 增强 代码 的 标准 
化 (工业 级 以 及 自 定义 ); 通过 代码 审查 度量 软件 质量 ; 软件 编程 规则 评估 ; MISRA C 准则 
检查 。 

CD 代码 规则 检查 自动 化 

这 是 一 个 基于 C 语言 开发 环境 下 用 以 提高 软件 产品 产量 和 质量 标准 的 深层 次 静态 分 
析 工 具 软 件 。 这 个 软件 可 以 自动 识别 C 语言 源 代码 中 出 现 的 问题 。 这 些 问 题 主要 是 语言 
使 用 过 程 不 安全 ,过 于 复杂 ,无 法 移植 ,难以 维护 或 与 该 行业 的 代码 标准 偏离 造成 的 。QAC 
能 够 对 许多 编译 器 或 其 他 工具 开发 软件 无 法 说 明 的 问题 提出 警告 。 这 个 工具 将 极 大 地 缩减 
代码 检测 的 时 间 并 能 同时 加 强 程序 设计 人 员 对 C 语言 中 不 完全 为 人 理解 的 某 些 特点 的 认 
知 。 利 用 QAC ,可 在 开发 软件 早期 阶段 对 存在 的 问题 加 以 注意 ,如 能 将 代码 质量 提高 ,同时 
测试 周期 也 将 缩短 。 

@ 提供 深层 次 的 静态 分 析 

使 用 该 工具 不 但 可 迅速 而 有 效 地 检测 出 语言 运用 中 的 错误 ,已 过 时 用 法 、 程 序 标准 一 致 
性 问题 ,从 而 防止 在 软件 开发 的 后 期 以 更 昂贵 的 代价 去 解决 问题 ,而 且 还 将 工业 标准 分 析 度 
量 标准 和 通俗 易 懂 的 报告 结合 在 一 起 。 

@ 规则 可 以 定制 

对 于 工具 的 数据 库 中 已 有 的 规则 ,可 以 由 测试 人 员 决 定 使 用 哪 项 规则 或 不 使 用 哪 项 规 
则 ,或 者 是 某 一 个 错误 等 级 的 规则 。 

对 于 特殊 行业 来 讲 , 也 许 部 分 需求 有 点 儿 特 殊 , 在 工具 中 没有 所 要 求 的 规则 ,但 这 没有 
关系 ,因为 规则 是 可 以 人 为 扩充 的 ,用 QAC 提供 的 定制 的 方法 可 以 添加 要 的 规则 。 

@ 可 以 和 开发 工具 集成 

可 以 和 Visual Studio 6.0、Visual Studio . NET、Tornado 集成 ,在 开发 环境 中 来 使 用 
QAC, 提 高 测试 效率 。 

支持 平台 : Solaris, HPUX, Linux, Windows 

优点 : 

D 缩减 软件 开发 的 成 本 和 产品 上 市 的 时 间 。 

@ 降低 软件 产品 质量 问题 。 
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@ 实现 代码 检测 过 程 自动 化 ,使 软件 开发 和 质量 检验 技术 人 员 提 高 效率 。 

@ 在 软件 研发 的 早期 阶段 识别 潜在 的 软件 产品 问题 和 其 他 可 能 出 错 的 问题 ,从 而 减少 
产品 测试 和 顾客 使 用 中 发 现 问题 的 几率 。 

C) 具有 较 好 的 集成 性 ,能 在 现 有 的 软件 环境 下 实现 安装 和 秃 载 。 自 动 检测 软件 产品 是 
否 符合 某 公司 或 某 行业 的 软件 标准 和 语言 安全 性 方面 的 要 求 。 

© 提高 C 语言 代码 的 编写 质量 ,通过 加 强 软件 可 靠 性 、 移 植 性 和 可 维护 性 三 方面 来 减 
少 软件 产品 未 来 的 维护 费用 。 

@ 帮助 软件 开发 人 员 生 产 高 质量 的 代码 。 

@ 支持 软件 认证 ,软件 研发 过 程 认证 和 各 种 质量 认证 ,如 CMM 认证 ,ISO 9003/ 
EN29003 ,TickIT,IEC 61508 ,Def Stan 00-55,DO-178B。 

@ 设立 了 软件 质量 度量 标准 ,后 期 代码 修改 可 以 得 到 衡量 和 比较 。 

D 为 软件 开发 的 成 本 和 产量 提供 依据 。 

D 帮助 企业 培训 软件 研究 及 开发 人 员 ,使 其 在 利用 C 语言 编程 过 程 中 避免 问题 。 

缺点 : 

D 代码 规则 检查 需要 付出 很 繁重 的 劳动 一 一 重新 理解 代码 ,国内 一 些 软 件 工 程 发 展 到 
现在 ,已 经 有 了 专职 的 测试 人 员 , 即 使 非常 专业 的 测试 人 员 ,理解 别人 写 的 代码 也 是 一 项 很 
烦琐 的 工作 。 

@ 时 间 和 资源 的 限制 。 任 何 一 个 企业 都 可 以 做 出 优秀 的 软件 ,前 提 是 给 他 足够 的 时 间 
和 物质 资源 ,可 现实 的 软件 开发 的 矛盾 却 是 : 在 有 限 的 时 间 内 、 利 用 有 限 的 经 费 ,来 做 高 可 
靠 性 的 软件 。 

@ 很 多 人 不 重视 代码 规则 检查 ,包括 很 多 软件 企业 的 领导 、 项 目 负 责 人 等 ,认为 代码 规 
则 检查 浪费 人 力 和 物力 ,恰恰 相反 ,这 种 观点 就 把 软件 中 存在 的 问题 留 到 了 最 后 ,在 软件 维 
护 过 程 中 会 付出 昂贵 的 代价 。 经 验 表明 ,软件 中 的 问题 发 现 得 越 早 , 要 克服 这 个 问题 付出 的 
代价 越 小 。 

是 否 免费 : T 

2) 动态 测试 工具 

动态 测试 工具 一 般 采 用 * 搬 桩 ?的 方式 ,向 代码 生成 的 可 执行 文件 中 插入 一 些 监 测 代码 ， 
用 来 统计 程序 运行 时 的 数据 。 其 与 静态 测试 工具 最 大 的 不 同 就 是 动态 测试 工具 要 求 被 测 系 
统 实际 运行 。 动 态 测 试 工具 的 代表 有 Rational 公司 的 Purify 系列 .Compuware 公司 的 
DevPartner 等 。 

(1) (Rational)Purify 

功能 描述 : 自动 化 测试 工具 Rational Purify 是 Rational PurifyPlus 工具 中 的 一 种 ， 
RationalPurifyPlus 包括 三 种 独立 的 工具 : Rational Purify、Rational Purecoverage, Rational 
Quantify. 

Purify 面向 VC. VB 或 者 Java 开发 的 测试 Visual C/C++ 和 Java 代码 中 与 内 存 有 关 的 
错误 ,确保 整个 应 用 程序 的 质量 和 可 靠 性 。 在 查找 典型 的 Visual C/C++ 程序 中 的 传统 内 存 
访问 错误 ,以 及 Java 代码 中 与 垃圾 内 存 收集 相关 的 错误 方面 ,Rational Purify 可 以 大 显 身 
手 。Rational Robot 的 回归 测试 与 Rational Purify 结合 使 用 完成 可 靠 性 测试 。Java 程序 员 
和 测试 人 员 可 以 将 Rational Purify 和 所 支持 的 JVM 相 结合 , 以 改善 和 优化 Java Applet 及 
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应 用 程序 的 内 存 功效 。Rational Purify 可 以 运行 Java Applet, 类 文件 或 JAR 文件 ,支持 
JVM 阅读 器 或 Microsoft Internet Explorer 等 容器 程序 。 

使 用 Rational Purify 特有 的 PowerCheck 功能 ,可 以 按 模 块 逐 个 调整 所 需 的 检查 级 别 。 
这 样 就 可 以 把 精力 集中 在 最 重要 的 代码 上 。 简 单 选择 “最 小 ”或 “准确 ” 即 可 。 

对 于 同时 进行 代码 覆盖 分 析 的 情况 ,请 选择 覆盖 级 别 , 如 “代码 行 ”或 “函数 ”, 以 便 更 好 
地 控制 错误 检查 和 数据 覆盖 。Purify 通过 对 API 调用 的 验证 ,确保 应 用 程序 的 可 靠 性 。 

Purify 带 有 及 时 调试 功能 , 当 检测 到 错误 时 , 它 将 自动 停止 编程 并 启动 调试 器 。 也 可 以 
通过 Purify 工具 栏 ,将 该 调试 器 附加 到 正在 运行 的 流程 中 。 这 将 大 大 增强 诊断 应 用 程序 中 
问题 的 能 力 , 从 而 缩短 查找 .复审 和 修正 错误 所 需 的 时 间 。 

Rational Purify 可 以 从 多 个 侧面 反映 应 用 程序 的 质量 一 一 功能 、 可 靠 性 和 性 能 。 
Rational Purify 通过 检测 影响 可 靠 性 的 内 存 相 关 编 程 错误 ,提高 Java 和 C++ 软件 的 质量 。 
Purify 可 在 进行 功能 测试 的 同时 ,对 可 靠 性 问题 进行 检测 ,从 而 弥补 了 质量 测试 的 不 足 。 

功能 描述 : 

可 检查 的 错误 类 型 : 

(D 矩阵 相关 错误 。 

@ 堆栈 相关 错误 。 

@ 垃圾 内 存 收集 一 一 Java 代码 中 相关 的 内 存 管理 问题 。 

@ COM 相关 错误 。 

指针 错误 。 

@ 内 存 使 用 错误 。 

@ Windows API 相关 错误 。 

® Windows API 函数 参数 错误 和 返回 值 错误 。 

@ 句柄 错误 。 

可 检测 错误 的 代码 : 

(D ActiveXCOLE/OCX) f ffF , 

Q COM 对 象 。 

© ODBC 构件 。 

@ Java HF, Applet, 类 文件 JAR 文件 。 

@ Visual C/C++ 源 代码 。 

Visual Basic 应 用 程序 内 柑 的 Visual C/C++ 构件 。 

@ 第 三 方 和 系统 DLL。 

@ 支持 COM 调用 的 应 用 程序 中 的 所 有 Visual C/C++ 构件 。 

优点 : 

(D 对 Debug 程序 能 很 好 地 查 出 内 存 泄漏 ,并且 精确 定位 代码 行 。 

© 使 用 很 简单 ,在 Rational Purify 环境 中 运行 要 调试 的 程序 ,Purify 首先 会 自动 插 装 
程序 ,查找 每 个 内 存 操作 相关 指令 ,并 写 入 加 上 自己 的 检测 指令 ,然后 将 修改 完 的 程序 复制 
到 Purify Cache 目录 下 运行 。 在 运行 中 维护 一 张 内 存 使 用 表 ,检测 每 块 内 存 的 分 配 和 销毁 ， 
直至 最 终 程序 退出 ,Purify 根据 其 维护 的 内 存 使 用 表 , 总 结 所 有 没有 被 释放 的 内 存 。 

@ Purify 会 插 装 所 有 程序 用 到 的 dll 执行 文件 ,包括 系统 dll, 可 以 设置 每 个 dll 的 插 装 
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程度 。 

@ 可 以 使 用 Filter 过 滤 掉 一 些 良 性 的 内 存 错误 。 

缺点 : 

(D 基本 上 对 Release 版 本 的 程序 没什么 用 ,一 个 Hello World 程序 Release 版 都 能 被 它 
测 出 64KB 的 内 存 汇 漏 , 令 人 费解 。 

© 极 不 稳定 ,崩溃 无 数 ,作为 一 个 测试 工具 自身 如 此 多 的 致命 问题 ,Rational 公司 吸 待 
改进 。 

@ 文档 较 差 ,大 部 分 查 到 的 文档 , 讲 的 都 是 功能 概括 ,而 非 具体 操作 指导 ,实际 上 解决 
不 了 什么 问题 。 

@ 被 它 插 装 的 大 型 程序 (Release 1MB 以 上 ,Debug 4MB 以 上 ) 极 不 稳定 ,容易 崩溃 , 运 
行 速度 会 慢 两 个 数量 级 ,导致 根本 无 法 正常 运行 到 进程 退出 ,内 存 错误 查找 更 无 法 进行 。 

是 否 免费 : T 

(2) (Compuware)DevPartner 

功能 : DevPartner Studio 主要 支持 三 个 功能 , BoundsChecker, TrueCoverger 和 
TrueTime, BoundsChecker 是 用 来 检查 内 存 泄 漏 的 ,TrueCoverger 是 用 来 检查 单元 测试 代 
码 概率 的 ,TrueTime 是 用 来 检查 动态 运行 时 哪 段 代码 的 执行 效率 偏 低 。 

DevPartner Studio 9. 0 可 以 实现 的 功能 包括 ,扫描 基于 微软 ASP. NET 的 应 用 程序 源 
码 ,以 找 出 潜在 的 应 用 程序 Bug 和 可 疑 行为 。 该 产品 可 高 亮 显示 存在 问题 的 代码 ,这 意味 
着 IT 经 理 可 以 在 开发 早期 发 现代 码 问题 ,防止 小 Bug 成 为 顽疾 。 另 外 ,此 程序 还 可 生成 基 
T Web 的 报告 ,报告 内 容 包括 代码 质量 代码 审查 、 错 误 检测 等 。 使 IT 经 理 们 可 以 准确 地 
找到 问题 ,构建 更 加 稳定 的 代码 。 

支持 平台 .技术 和 操作 系统 : DevPartner Studio 9. 0 现在 支持 Windows x64 位 平台 的 
32 位 应 用 程序 开发 ,以 及 最 新 的 . NET Framework 技术 ,支持 的 编程 工具 及 操作 系统 包括 
Visual Studio 2008、Windows Server 2008.. NET Framework 3. 5 和 Windows Presentation 
Foundation, 

该 工具 还 将 支持 微软 的 早期 编程 工具 ,例如 Visual Studio 6. 0, Visual Basic 6. 0, Visual 
C++ 6.0, Visual Studio .NET 2003 fll. NET Framework 1.1. 

DevPartner Studio Professional Edition 能 加 速 软件 开发 并 构建 可 靠 的 软件 代码 ， 
DevPartner Studio 能 方便 地 集成 到 团队 的 现 有 开发 流程 和 Visual Studio .NET IDE 中 ,从 
而 对 . NET 开发 提供 了 出 色 的 解决 方案 ; 它 还 提供 针对 . NET 和 本 地 开发 的 解决 方案 , 帮 
助 程序 的 维护 和 优化 人 员 开发 .NET 程序 。 

DevPartner Studio 为 软件 开发 人 员 对 复杂 的 程序 错误 提出 了 最 佳 的 标志 方法 ,帮助 他 
们 构建 应 用 程序 的 各 种 商务 逻辑 。 

DevPartner 源 代码 分 析 器 能 方便 地 指出 程序 错误 ,更 重要 的 是 它 能 说 明 程 序 错误 的 原 
因 , 以 指针 形式 指明 网 络 或 书 中 才 有 的 详细 信息 。 

DevPartner Studio 代码 分 析 器 ,能 够 让 用 户 一 边 编 码 一 边 学 习 , 并 通过 每 次 发 布 新 版 
本 ,提高 工作 效率 。 

是 否 免 费 : 否 


2. 黑 盒 测试 工具 


黑 盒 测试 工具 适用 于 黑 盒 测试 的 场合 , 黑 盒 测试 工具 包括 功能 测试 工具 和 性 能 测试 工 
有 具 。 黑 盒 测 试 工具 的 一 般 原理 是 利用 脚本 的 录制 (Record)/ 回 放 (Playback) ,模拟 用 户 的 操 
作 , 然 后 将 被 测 系统 的 输出 记录 下 来 同 预先 给 定 的 标准 结果 比较 。 黑 盒 测试 工具 可 以 大 大 
减轻 黑 盒 测试 的 工作 量 ,在 迭代 开发 的 过 程 中 ,能 够 很 好 地 进行 回归 测试 。 黑 盒 测试 工具 的 
代表 有 : Rational 公司 的 Robot、TeamTest; Compuware 公司 的 QACenter。 

1) (Rational) Robot 

功能 : Rational Robot 是 Rational 的 产品 之 一 ,提供 了 软件 测试 的 功能 , 行 如 其 名 , 它 提 
供 了 许多 类 似 机 器 人 的 重复 过 程 , 供 测试 用 。 

Rational Robot 可 开发 三 种 测试 脚本 : 用 于 功能 测试 的 GUI 脚本 、 用 于 性 能 测试 的 
VU 以 及 VB 脚本。 

Rational Robot 可 以 让 测试 人 员 对 . NET、Java、Web 和 其 他 基于 GUI 的 应 用 程序 进行 
自动 的 功能 性 回归 测试 ,是 一 种 对 环境 的 多 功能 的 、 回 归 和 配置 测试 工具 。 在 该 环境 中 ,可 
以 使 用 一 种 以 上 的 IDE 和 (或 ) 编 程 语言 开发 应 用 程序 。 可 以 很 容易 地 使 手动 测试 小 组 转 
变 到 自动 测试 上 来 。 使 用 IBM Rational Robot 进行 回归 测试 是 早期 步 人 自动 化 的 很 好 的 
一 步 , 因 为 它 易于 使 用 ,并 且 可 以 帮助 测试 者 在 工作 的 过 程 中 学 习 一 些 自动 处 理 的 知识 。 

为 诸如 菜单 .列表 和 位 图 这 些 通用 的 对 象 提供 测试 用 例 和 为 特定 于 开发 环境 的 对 象 提 
供 专用 的 测试 用 例 。 

包括 内 置 的 测试 管理 ,并 且 在 IBM Rational Team Unifying Platform 中 整合 了 错误 跟 
踪 的 工具 ,这 改变 了 管理 和 需求 跟踪 能 力 。 

支持 的 技术 : 支持 从 Java™ 和 Web 到 所 有 VS. NET 控件 的 多 种 UI 技术 ,包括 
VB. NET.J# ,C£ fll Managed C++ 。 

是 否 免费 : T 

2) (Compuware)QACenter 

功能 : QACenter 帮助 所 有 的 测试 人 员 创 建 一 个 快速 .可 重用 的 测试 过 程 。 这 些 测 试 工 
有 具 自动 帮助 管理 测试 过 程 ,快速 分 析 和 调试 程序 ,包括 针对 回归 、 强 度 .单元 .并 发 .集成 、 移 
植 . 容 量 和 负载 建立 测试 用 例 ,自动 执行 测试 和 产生 文档 结果 。QACenter 主要 包括 以 下 几 
个 模块 。QARun: 应 用 的 功能 测试 工具 。QALoad: 强 负载 下 应 用 的 性 能 测试 工具 。 
QADirector: 测试 的 组 织 设计 和 创建 以 及 管理 工具 。TrackRecord: 集成 的 缺陷 跟踪 管理 
工具 。EcoTools: 高 层次 的 性 能 监测 工具 。 

优点 : 

Compuware 的 QACenter 家 族 集成 了 一 些 强大 的 自动 工具 ,这 些 工具 符合 大 型 计算 机 
应 用 的 测试 要 求 ,使 开发 组 获得 一 致 而 可 靠 的 应 用 性 能 。 

QADirector 使 用 户 能 够 自动 地 组 织 测试 资料 ,包括 : 自动 脚本 ,由 QAHiperstation 或 
者 QARun 产生 手工 脚本 ,测试 步骤 的 序列 MVS 批 处 理 作 业 脚 本 ,执行 作业 所 必需 的 JCL 
其 他 脚本 ,在 用 户 工作 站 上 执行 程序 的 测试 脚本 建立 测试 过 程 , 以 便 对 多 种 情况 和 条 件 进 行 
测试 , 按 正 确 的 次 序 执行 多 个 测试 脚本 ,记录 、 跟 踪 、 分 析 和 记录 测试 结果 ,与 多 个 并 发 用 户 
共享 测试 信息 。 
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是 否 免费 : 否 
3. 测试 管理 工具 


测试 管理 工具 用 于 对 测试 进行 管理 。 一 般 而 言 ,测试 管理 工具 对 测试 需求 .测试 计划 、 
测试 用 例 ,测试 实施 进行 管理 ,并 且 测 试管 理工 具 还 包括 对 缺陷 的 跟踪 管理 。 测 试管 理工 具 
能 让 测试 人 员 、 开 发 人 员 或 其 他 的 IT 人 员 通 过 一 个 中 央 数 据 仓 库 , 在 不 同 地 方 就 能 交互 信 
息 。 测 试管 理工 具 的 代表 有 : HP 公司 的 TestDirector/Quality Center, Rational 公司 的 
Test Manager、 TestLink, Compureware 公司 的 QADirector、 SilkCentral Test Manager 
(SilkPlan Pro) ,上 海 泽 众 软 件 公 司 的 TestCenter 等 软件 。 

1) CHP)TestDirector/Quality Center 

功能 : 业界 第 一 个 基于 Web 的 测试 管理 系统 , 它 可 以 在 公司 组 织 内 进行 全 球 范围 内 测 
试 的 协调 。 通 过 在 一 个 整体 的 应 用 系统 中 提供 并 且 集 成 了 测试 需求 管理 ,测试 计划 ,测试 日 
程控 制 以 及 测试 执行 和 错误 跟踪 等 功能 ,TestDirector 极 大 地 加 速 了 测试 过 程 。8.0 后 改称 
QC. hF HP QC 可 以 单独 使 用 Defect 模块 ,也 可 单独 申请 Defect 模块 的 License, 它 也 是 
名 副 其 实 的 缺陷 管理 工具 。 

优点 : 

(1) TD 是 一 个 测试 管理 工具 ,管理 需求 测试 用例 设计 、 测 试用 例 执 行 、 缺 陷 。 而 TM 
不 涉及 需求 和 缺陷 ,当然 TM 可 以 和 RequsitePro,CQ 结合 ,但 毕竟 不 怎么 方便 。 

(2) TD 可 以 统计 测试 用 例 对 需求 的 覆盖 ,测试 用 例 对 缺陷 的 覆盖 。 

(3) 可 以 和 VSS 集合 ,对 测试 用 例 进行 版 本 控制 。 

(4) 可 以 和 CQ 集合 ,达到 两 个 缺陷 工具 数据 同步 。 

缺点 : 

(1) 对 Close 的 测试 集 没有 状态 标记 。 

(2) 快速 执行 测试 用 例 的 时 候 ,不 能 看 到 测试 用 例 内 容 。 一 般 快 速 执行 是 比较 常用 的 。 

(3) 不 能 实现 自动 多 级 联动 ,需要 硬 编码 。 

(4) 没有 System and Browser Matrix。 

(5) JR Defect 的 时 候 ,Assign To 只 显示 开发 人 员 。 

是 否 免费 : 否 

2) (Rational)TestManager 

功能 : 是 针对 测试 活动 管理 ,执行 和 报告 的 中 央 控 制 台 。 它 是 为 可 扩展 性 而 构建 的 , 支 
持 的 范围 从 纯 人 工 测试 方法 到 各 种 自动 化 范 型 (包括 单元 测试 ,功能 回归 测试 和 性 能 测试 )。 
Rational TestManager 可 以 由 项 目 团队 的 所 有 成 员 访 问 ,确保 了 测试 覆盖 信息 、 缺 陷 倾 势 和 
应 用 程序 准备 状态 的 高 度 可 见 性 。 

优点 : 

(1) 有 自己 的 客户 端 ,响应 速度 会 快 一 点 儿 。 

(2) 强大 Case 的 管理 功能 ,可 以 任意 条 件 组 合 自己 的 Test Case, 

(3) 可 以 区 分 不 同 的 build 保存 测试 的 结果 。 

(4) 集成 强大 的 数据 生成 器 (dataPool) 。 

(5) 与 第 三 方 报 表 完全 集成 ,生成 多 种 且 完 整 的 数据 报表 及 图 表 。 


(6) 与 IBM 公司 的 其 他 组 件 (如 CQ, Robot, RequsitePro 等 ) 无 颖 结合 ,实现 完整 的 测 
试管 理 及 测试 执行 平台 。 

缺点 : 

(1) 没有 权限 管理 功能 。 

(2) 支持 的 数据 库 类 型 太 少 ,尤其 Access 数据 库 ,不 能 支持 太 多 的 访问 并 发 用 户 数 。 

(3) 不 支持 Test Case 的 实例 化 功能 。 

(4) 不 能 预先 安排 Case 的 执行 任务 给 相应 的 测试 人 员 。 

是 否 免费 : 否 

3) TestLink 

功能 : TestLink 是 SourceForge 的 开放 源 代 码 项 目 之 一 。 作 为 基于 Web 的 测试 管理 
系统 ,TestLink 的 主要 功能 包括 测试 需求 管理 测试 用 例 管理 ,测试 用例 对 测试 需求 的 覆盖 
管理 ,测试 计划 的 制订 、 测 试用 例 的 执行 、 大 量 测试 数据 的 度量 和 统计 功能 等 。 

优点 : 

(1) TestLink 用 于 进行 测试 过 程 中 的 管理 ,通过 使 用 TestLink 提供 的 功能 ,可 以 将 测 
试 过 程 从 测试 需求 ,测试 设计 到 测试 执行 完整 地 管理 起 来 。 

(2) 提供 了 多 种 测试 结果 的 统计 和 分 析 , 使 用 户 能 够 简单 地 开始 测试 工作 和 分 析 测 试 
结果 。 

(3) TestLink 可 以 关联 多 种 Bug 跟踪 系统 ,如 Bugzilla、Mantis 和 Jira。 

缺点 : 

CD 不 能 根据 优先 级 筛选 用 例 ,如 果 需 要 优先 级 ,必须 通过 关键 字 来 实现 ,比较 麻烦 。 

(2) 不 能 设 定 测试 用 例 的 种 类 ,如 果 需 要 必须 通过 关键 字 来 实现 ,更 麻烦 ,也 不 太 现实 。 

(3) 如 果 测 试用 例 需 要 大 量 的 数据 ,创建 测试 用 例 时 不 方便 。 

使 用 环境 : Apache,MySQL,PHP 

是 否 免费 : 开源 免费 

4) (Compureware)QADirector 

功能 : 

(1) 计划 和 组 织 测试 需求 ,从 多 种 多 样 的 开发 工具 和 自动 测试 工具 执行 测试 ,在 测试 过 
程 中 允许 使 用 手动 测试 ,观察 和 分 析 测试 结果 ,方便 地 将 信息 加 载 到 缺陷 跟踪 系统 ,针对 需 
求 验 证 应 用 测试 ,将 分 析 过 程 与 测试 过 程 结 合 ,确保 测试 计划 符合 最 终 用 户 需求 。 

(2) 设计 综合 测试 。QADirector 合理 地 按 可 视 树 状 结构 组 织 测试 ,使 测试 人 员 能 够 建 
立 测 试 套件 ,套件 中 包括 大 量 必 需 的 测试 脚本 。 当 测试 过 程 难以 自动 执行 或 没有 自动 化 测 
试 工具 时 ,QADirector 提供 一 个 Internet 浏览 器 界面 ,QA 管理 人 员 可 以 通过 这 些 建立 一 个 
综合 的 手工 测试 。 测 试 人 员 可 以 通过 Internet 浏览 器 查看 哪些 手工 测试 是 分 给 自己 的 或 从 
未 分 配 的 测试 中 选择 相关 的 测试 任务 。 

(3) 共享 和 维护 集中 的 测试 资产 。 利 用 QADirector, 所 有 测试 资产 可 以 通过 基于 
Aclearcase/" target="_blank" 二 ccess\SQL Server 或 Oracle 7 和 Oracle 8 的 集中 存储 库 
进行 访问 和 共享 。 

(4) 自动 地 执行 测试 。QADirector 自动 运行 多 个 测试 周期 ,并 将 结果 存储 在 存储 库 
中 。 测 试 可 以 交互 执行 或 按时 间 表 执行 ,在 预定 的 日 .星期 或 月 完全 自动 批 处 理 执行 。 
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(5) 测试 期 间 诊 断 应 用 问题 。 在 测试 周期 里 诊断 应 用 问题 并 获得 诊断 信息 是 困难 的 ， 
这 对 产品 在 应 用 中 保持 性 能 平稳 也 是 至 关 重要 的 。ActiveAnalysis 是 QACenter 的 一 个 新 
功能 ,利用 它 很 容易 发 现 和 查找 测试 中 的 错误 。 

(6) 快速 错误 再 现 。 测 试 和 开发 环境 的 不 同 使 再 现 错误 成 为 一 个 挑战 ,例如 ,在 一 个 复 
杂 的 测试 场景 中 的 内 存 泄漏 。 NuMeGa BoundsChecker Visual C++Edition 是 Compuware 
的 程序 分 析 工 具 , 用 于 检测 和 诊断 代码 缺陷 。BoundsChecker 与 QADirector 的 集成 使 得 测 
试 人 员 能 够 定位 错误 。 这 种 错误 通常 到 投产 阶段 才 会 被 发 现 。 

(7) 故障 检查 。 有 故障 的 程序 进入 投产 阶段 结果 是 难以 想象 的 ,需要 耗费 大 量 时 间 来 
修正 。 将 故障 检测 能 力 结合 到 测试 过 程 , 允 许 测试 人 员 在 常规 的 测试 活动 期 间 , 自 动 收集 大 
量 关 于 未 覆盖 的 故障 信息 。 

(8) 性 能 调试 QADirector 和 NuMega TrueTime 一 起 工作 可 以 帮助 开发 人 员 确 定 程序 
为 什么 运行 得 慢 。TrueTime 是 为 Visual C++ 开发 人 员 准 备 的 一 个 性 能 分 析 工 具 , 它 自动 
定位 运行 缓慢 的 代码 和 人 性 能 瓶颈 。 在 QADirector 报告 中 ,这 些 数据 可 在 应 用 投产 之 前 用 于 
调试 应 用 和 部 件 , 以 使 企业 的 关键 应 用 保持 高 性 能 。 

(9) 容易 地 访问 和 比较 测试 结果 。QADirector 自动 存储 每 次 测试 运行 的 结果 并 从 多 
个 工具 中 整理 测试 结果 。 在 一 个 单一 的 视图 中 ,测试 人 员 可 以 看 到 测试 脚本 的 通过 /失败 状 
态 ,快速 识别 失败 并 追踪 问题 。 测 试 结果 结合 代码 覆盖 率 统计 提供 了 另外 一 个 尺度 来 评估 
应 用 的 质量 。 

(10) 从 多 个 源 跟踪 缺陷 。 在 测试 过 程 中 识别 的 缺陷 可 以 从 QADirector 加 载 到 
TrackRecord(Compuware 的 自动 缺陷 跟踪 工具 )。QADirector 把 缺陷 的 ID 与 测试 套件 一 
起 存储 以 方便 继续 跟踪 。 测 试 结果 也 可 以 从 其 他 源 加 载 ,包括 QACenter 和 File-AID 
工具 。 

优点 : 分 布 式 的 测试 能 力 和 多 平台 支持 ,能 够 使 开发 和 测试 团队 跨越 多 个 环境 控制 测 
试 活动 ,QADirector 允许 开发 人 员 ,测试 人 员 和 QA 管理 人 员 共 享 测 试 资产 ,测试 过 程 和 测 
试 结果 、 当 前 的 和 历史 的 信息 ,从 而 为 客户 提供 了 最 完全 彻底 的 一 致 的 测试 。 

是 否 免费 : T 

5) SilkCentral Test Manager(SilkPlan Pro) 

功能 : 是 一 个 完整 的 测试 管理 软件 ,用 于 测试 的 计划 ,文档 和 各 种 测试 行为 的 管理 。 它 
提供 对 人 工 测试 和 自动 测试 的 基于 过 程 的 分 析 、 设 计 和 管理 功能 ,此 外 ,还 提供 了 基于 Web 
的 自动 测试 功能 。 这 使 得 SilkPlan Pro 成 为 Segue Silk 测试 家 族 中 的 重要 成 员 和 用 于 监测 
的 解决 方案 。 在 软件 开发 的 过 程 中 ,SilkPlan Pro 可 以 使 测试 过 程 自动 化 ,节省 时 间 , 同 时 
帮助 用 户 回 答 重 要 的 业务 应 用 面临 的 关键 问题 。 

优点 : 在 开发 过 程 中 充分 综合 了 测试 ,无 人 干预 地 自动 执行 测试 过 程 、 减 少 维护 成 本 、 
完全 的 过 程控 制 \ 有 效 的 处 理 变化 ,用户 可 以 配置 和 升级 .需求 跟踪 、 基 于 Web 的 报告 和 缺 
陷 管 理工 具 结 合 等 。 

系统 需求 : 

SilkPlan (测试 管理 ) 

Pentium 166MHz.64MB RAM.100MB 硬盘 空间 

Microsoft Windows 95.98. ME.2000. NT4(SP4 或 者 更 高 ) 
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Microsoft Access (97.2000) ,SQL Server(6. 5.7. 0.2000) ,Oracle (7. 3. 4.8. 1. 6. 0). 

SilkScheduler Server 组 件 ( 自 动 化 测试 ) 

Pentium 500MHz,128MB RAM,150MB 硬盘 空间 

Microsoft Windows 2000,NT4(SP6 或 者 更 高 ) 

Microsoft SQL Server(7. 0,2000), MSDE 

是 否 免费 : 否 

6) (上海 泽 众 软件 ) TestCenter 

功能 : 上 海 泽 众 软 件 自主 研发 的 一 款 功 能 强大 的 测试 管理 工具 , 它 可 以 帮助 用 户 ; 实 
现 测试 用 例 的 过 程 管理 ,对 测试 需求 过 程 ,测试 用 例 设计 过 程 、 业 务 组 件 设计 实现 过 程 等 整 
个 测试 过 程 进行 管理 。 

是 否 免费 : 有 免费 版 本 


4. 性 能 测试 工具 


专用 于 性 能 测试 的 工具 包括 : RadView 公司 TestView 系列 测试 工具 ; Microsoft 公司 
的 WebStress 等 工具 ; 针对 数据 库 测试 的 TestBytes; MercuryInteractive 的 LoadRunner 
是 一 种 适用 于 各 种 体系 架构 的 自动 负载 测试 工具 , 它 能 预测 系统 行为 并 优化 系统 性 能 。 
LoadRunner 的 测试 对 象 是 整个 企业 的 系统 , 它 通过 模拟 实际 用 户 的 操作 行为 和 实行 实时 
性 能 监测 ,来 帮助 用 户 更 快 地 查找 和 发 现 问 题 。 

1) (RadView)TestView 

功能 : TestView 系列 Web 性 能 测试 工具 和 WebLoad Analyzer 性 能 分 析 工 具 旨 在 测 
iX Web 应 用 和 Web 服务 的 功能 ,性 能 \ 程 序 漏洞 .兼容 性 、 稳 定性 和 抗 攻 击 性 ; 并 且 能 够 在 
测试 的 同时 分 析 问 题 原因 和 定位 故障 点 。 从 而 为 测试 工作 者 提供 有 力 的 帮助 ,加 速 “ 开 发 
测试 "循环 ,提高 劳动 生产 率 。 

TestView 系列 Web 性 能 测试 软件 包含 三 个 模块 WebLoad. WebFT 以 及 TestView 
Manager, TestView Manager 用 来 定制 .管理 各 种 测试 活动 ; WebLoad 模拟 多 个 用 户 行 为 
进行 测试 ,所 测试 的 是 系统 性 能 、 容 量 、 稳 定性 和 抗 攻击 性 ; WebFT 模仿 单一 用 户 行为 进行 
测试 ,所 测试 的 是 系统 功能 、 漏 洞 兼容 性 和 稳定 性 。 

模块 介绍 : 

(1) WebLoad 
WebLoad 专 为 测试 在 大 量 用 户 访问 下 的 Web 应 用 性 能 而 设计 。 其 控制 中 心 运行 在 
Windows 2000,XP 和 2003 操作 系统 上 .负载 发 生 模块 可 以 运行 在 Windows, Solaris 和 
Linux 操作 系统 上 。 模 拟 出 来 的 用 户 流 量 可 支持 . NET 和 J2EE 两 种 环境 。 

WebLoad 的 测试 脚本 采用 JavaScript 脚本 语言 实现 ,支持 在 DOM (Document Object 
Model) 的 基础 之 上 ,将 测试 单元 组 织 成 树 状 结构 ,对 Web 应 用 进行 遍历 或 者 选择 性 测试 。 
WebLoad 还 可 以 录制 用 户 访问 Web 应 用 的 操作 过 程 ,自动 生成 测试 脚本 ,也 可 以 使 用 脚本 
编辑 器 手工 编辑 或 者 修改 脚本 。 

WebLoad 的 专利 技术 可 以 让 用 户 为 系统 设 定 最 低 可 接受 性 能 门限 值 ,并 让 WebLoad 
采用 自 增 用 户 数 的 循环 测试 方式 进行 测试 ,这 样 WebLoad 就 可 以 自动 测 得 系统 的 最 大 用 
户 容量 。 
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WebLoad 不 仅 能 够 测试 Web 性 能 ,还 能 通过 直观 的 图 形 用 户 界 面 直接 连接 到 数据 库 ， 
测试 数据 库 性 能 。 还 可 以 测试 多 种 Internet 协议 如 FTP,Telnet,SMTP,POP 等 的 性 能 。 

WebLoad 还 可 以 模拟 DDOS 攻击 。 它 可 以 模拟 诸如 Tfn、Tfn2K、Trinoo、Smurf、 
Flitz, Carko, Omega3, Plague 和 TCP Flood(SYN.ACK).UDP Flood, ICMP Flood(Ping、 
Host-Unreachable) 等 攻击 。 通 过 模拟 DDOS 攻击 可 以 测试 Web 系统 在 面临 DDoS 攻击 的 
时 候 的 可 用 性 和 反应 时 间 的 受 影响 情况 。 同 时 , WebLoad 提供 有 关 DOS 攻击 测试 的 详细 
报告 ,帮助 用 户 分 析 系 统 漏洞 和 弱点 ,为 用 户 加 固 系 统 提 供 依据 。 

WebLoad 支持 与 绝 大 多 数 的 应 用 服务 器 和 数据 库 接口 , 读 取 它 们 送出 的 错误 和 调试 信 
息 。 如 IBM 公司 的 WebSphere. Sun 公司 的 iPlanet. BEA 公司 的 WebLogic, Apache, 
Oracle. SQL Server 等 。 再 结合 前 端 测试 结果 , WebLoad 能 提供 全 面 的 Web 性 能 分 析 报 
告 ,使 用 户 能 够 快速 定位 瓶颈 ,发 现 问题 。 

(2) WebFT 

WebFT 帮助 用 户 对 Web 系统 进行 快速 有 效 的 功能 性 测试 。 它 是 模拟 单 用 户 对 网 站 
进行 功能 测试 的 。 

WebFT 支持 三 个 测试 级 别 : 全 局 ,页面 和 对 象 。 用 户 可 以 测试 系统 或 者 页 面 的 全 部 功 
能 ,也 可 以 深入 细致 地 测试 页 面 上 某 个 对 象 的 功能 。 例 如 ,HTML 页 面 的 某 个 属性 «AE x 
入 的 Java 对 象 或 者 ActiveX 控件 。 

WebFT 测试 脚本 与 WebLoad 的 完全 一 样 ,也 是 使 用 JavaScript 语言 写成 ,也 能 够 自动 
生成 。 因 此 WebFT 使 用 的 脚本 ,也 可 以 在 WebLoad 中 使 用 。 

(3) TestView Manager 

TestView Manager 用 来 管理 和 组 织 各 种 规模 的 测试 活动 ,使 用 它 可 以 定义 任意 数量 和 
复杂 度 的 脚本 。 它 可 以 将 各 个 测试 脚本 组 成 一 个 测试 项 目 ,用 树 状 结构 来 组 织 脚本 的 执行 
次 序 和 相互 关系 ,完全 模拟 用 户 访问 Web 的 行为 。TestView 甚至 可 以 同时 运行 多 种 测试 
平台 上 的 多 种 测试 脚本 。 

TestView Manager 可 以 为 测试 制定 任意 的 执行 时 间 表 ,时 间 表 一 旦 制定 ,测试 就 可 以 
在 指定 时 间 里 运行 ,无 须 人 为 干预 。 用 户 也 可 以 随时 去 停止 、 开 始 或 者 修改 本 来 按时 间 表 执 
行 的 测试 。 

TestView Manager 提供 多 个 层面 的 测试 结果 分 析 : 从 高 度 综合 的 分 析 报 告 到 最 底层 
的 测试 结果 数据 都 可 以 呈现 在 用 户 眼前 。 同 时 ,TestView 提供 各 个 报告 之 间 的 比较 功能 ， 
为 用 户 后 期 的 测试 分 析 工 作 提供 便利 。 

是 否 免费 : T 

2) (Logic works)TESTBytes 

功能 : 在 数据 库 开 发 的 过 程 中 ,为 了 测试 应 用 程序 对 数据 库 的 访问 ,应 当 在 数据 库 中 生 
成 测试 用 数据 ,我 们 可 能 会 发 现 当 数据 库 中 只 有 少量 的 数据 时 程序 可 能 没有 问题 ,但 是 当真 
正 投 入 到 运用 中 产生 了 大 量 数据 就 出 现 问题 了 。 

TESTBytes 是 一 个 用 于 自动 生成 测试 数据 的 强大 易 用 的 工具 ,通过 简单 的 点 击 式 操 
fE ,就 可 以 确定 需要 生成 的 数据 类 型 (包括 特殊 字符 的 定制 ) ,并 通过 与 数据 库 的 连接 来 自动 
生成 数 百 万 行 的 正确 的 测试 数据 ,可 以 TESTBytes 支持 的 平台 有 : Windows NT, Windows 
95/98. Windows 3. x, 


优点 : 极 大 地 提高 数据 库 开发 人 员 、QA 测试 人 员 数据 仓库 开发 人 员 、 应 用 开发 人 员 
的 工作 效率 。 

缺点 : 

(1) TestBytes 能 轻松 地 处 理 关键 数据 的 关联 ,但 是 忽视 了 其 他 数据 库 的 约束 。 

(2) TestBytes 产生 不 相关 数据 时 ,该 软件 允许 随机 或 者 连续 给 出 初始 关键 值 。 也 可 以 
使 用 SQL 的 Where 语句 来 限制 不 相关 数据 。 不 过 ,如 果 该 数据 列 不 是 不 相关 数据 关联 的 
一 部 分 ,TestBytes 仍然 不 能 够 给 出 数据 列 设置 基数 。 

是 否 免费 : 否 

3) (HP)LoadRunner 

功能 : 

(1) 轻松 创建 虚拟 用 户 

使 用 LoadRunner 的 Virtual User Generator, 用 户 能 很 简便 地 创立 起 系统 负载 。 该 引 
擎 能 够 生成 虚拟 用 户 , 以 虚拟 用 户 的 方式 模拟 真实 用 户 的 业务 操作 行为 。 它 先 记 录 下 业务 
流程 (如 下 订单 或 机 票 预订 ) ,然后 将 其 转化 为 测试 脚本 。 

(2) 创建 真实 的 负载 

Virtual Users 建立 起 后 ,用 户 需 要 设 定 负载 方案 ,业务 流程 组 合 和 虚拟 用 户 数量 。 用 
LoadRunner 的 Controller, 能 很 快 组 织 起 多 用 户 的 测试 方案 。Controller 的 Rendezvous 功 
能 提供 一 个 互动 的 环境 ,在 其 中 既 能 建立 起 持续 且 循 环 的 负载 ,又 能 管理 和 驱动 负载 测试 
方案 。 

(3) 定位 性 能 问题 

LoadRunner 内 含 集成 的 实时 监测 器 ,在 负载 测试 过 程 的 任何 时 候 ,都 可 以 观察 到 应 用 
系统 的 运行 性 能 。 这 些 性 能 监测 器 为 用 户 实时 显示 交易 性 能 数据 (如 响应 时 间 ) 和 其 他 系统 
组 件 , 包 括 Application Server, Web Server, 网 络 设 备 和 数据 库 等 的 实时 性 能 。 这 样 ,用 户 
就 可 以 在 测试 过 程 中 从 客户 和 服务 器 的 双方 面 评估 这 些 系 统 组 件 的 运行 性 能 ,从 而 更 快 地 
发 现 问 题 。 

(4) 分 析 结 果 以 精确 定位 问题 所 在 

一 旦 测试 完毕 ,LoadRunner 收集 汇总 所 有 的 测试 数据 ,并 提供 高 级 的 分 析 和 报告 工 
有 具 ,以 便 迅 速 查找 到 性 能 问题 并 追溯 缘由 。 使 用 LoadRunner 的 Web 交易 细节 监测 器 ,可 
以 了 解 到 将 所 有 的 图 像框 架 和 文本 下 载 到 每 一 网 页 上 所 需 的 时 间 。 另 外 ,Web 交易 细节 
监测 器 分 解 用 于 客户 端 网 络 和 服务 器 上 端 到 端的 反应 时 间 , 便 于 确认 间 题 ,定位 查找 真正 
出 错 的 组 件 。 

(5) 重复 测试 保证 系统 发 布 的 高 性 能 

负载 测试 是 一 个 重复 过 程 。 每 次 处 理 完 一 个 出 错 情况 ,用 户 都 需要 对 应 用 程序 在 相同 
的 方案 下 ,再 进行 一 次 负载 测试 。 以 此 检验 所 做 的 修正 是 否 改善 了 运行 性 能 。 

优点 : 

(1) LoadRunner 是 目前 软件 负载 测试 的 工业 标准 。 

(2) LoadRunner 是 通过 模拟 多 个 用 户 并 发 负载 ,并 进行 实时 监控 的 方式 来 进行 测试 。 

(3) 支持 多 种 协议 ,包括 HTTP.WAP.Winsock.Tuxedo. Oracle 等 。 

(4) 与 其 他 负载 测试 工具 的 不 同 在 于 ,LoadRunner 的 每 一 个 虚拟 用 户 所 占用 的 系统 资 
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源 较 少 ,适合 用 较 少 的 负载 测试 机 器 来 达到 大 规模 的 负载 测试 所 要 求 的 并 发 压力 。 
LoadRunner 适用 于 网 络 应 用 的 负载 测试 。 

缺点 : 

(1) 对 汉语 的 编码 支持 问题 : UTF-8/GBK 设置 导致 有 时 仅 用 英文 作 web_reg_find 的 
Check Point, 

(2) LoadRunner 8. 1 UDP 方式 监控 UNIX 资源 导致 有 断 续 。 

CD 有 时 应 用 VuGen 录制 /回放 异常 退出 程序 。 

(4) 价格 昂贵 。 

(5) 支持 Jboss/Tomcat/ MySQL 等 的 应 用 性 能 数据 需要 自己 实现 ,实际 上 监控 Linux 
也 无 可 用 内 存 、iowait% 、 网 络 流量 等 指标 。 

系统 要 求 : LoadRunner 分 为 Windows 版 本 和 UNIX 版 本 。LoadRunner 的 UNIX 版 
本 仅 提 供 Load Generator 组 件 的 安装 ( 即 LoadRunner 中 的 负载 生成 器 ) 。 也 就 是 说 ,这 个 
负载 生成 器 可 以 在 UNIX 环境 下 安装 和 运行 ,并 提供 给 Controller 进行 远程 管理 。 但 是 , 肢 
本 的 录制 和 场景 的 设计 必须 在 Windows 平台 完成 。 

运行 LoadRunner, 内 存 最 好 在 128MB 以 上 ,这 是 LoadRunner 7. 8 的 最 低 要 求 。 内 存 
最 好 在 512MB 以 上 ,安装 LoadRunner 的 磁盘 空间 至 少 剩余 500MB。 操 作 系 统 最 好 为 
Windows 2000, 

是 否 免费 : T 


(.3 测试 工具 的 选择 方法 


面 对 目 前 众多 的 测试 工具 ,在 对 其 进行 分 析 和 评估 时 ,应 注重 其 特性 ,针对 测试 的 实际 
需求 ,可 以 着 重 从 以 下 几 点 入手 。 


1. 选择 标准 


选择 测试 工具 并 非 测 试 功能 越 强大 越 好 ,因为 解决 问题 是 前 提 , 适 用 才 是 根本 。 首 先 ， 
测试 工具 要 具有 跨 平 台 和 对 环境 的 兼容 性 ,能 够 支持 不 同 的 运行 平台 ,如 各 种 操作 系统 和 浏 
览 器 。 其 次 ,操作 界面 要 具有 友好 型 , 易 使 用 ,功能 针对 性 强 ; 再 次 ,要 支持 脚本 语言 ,并 且 
具有 脚本 开发 的 良好 环境 ,能 提供 较 强 的 脚本 调试 功能 ,可 以 有 效 地 对 测试 脚本 进行 跟踪 、 
错误 定位 ; 最 后 ,也 要 具有 报表 功能 ,因为 测试 结果 可 能 会 通过 一 些 统计 图 来 表示 ,如 果 有 
图 表 表示 功能 ,给 人 的 结果 会 更 直观 ,更 有 说 服 力 ,容易 完成 对 测试 结果 的 分 析 和 解释 。 


2. 评估 方法 


那么 , 面 对 目前 存在 的 如 此 多 的 测试 工具 ,该 怎样 分 析 和 评估 一 个 测试 工具 呢 ? 应 该 着 
重 从 以 下 几 点 人手 。 

功能 : 选择 一 个 测试 工具 首先 就 是 看 它 提供 的 功能 。 当 然 ,这 并 不 是 说 测试 工具 提供 
的 功能 越 多 就 越 好 ,在 实际 的 选择 过 程 中 ,适用 才 是 根本 。 

价格 : 对 测试 工具 的 分 析 评 价 的 主要 目的 之 一 ,就 是 选择 一 个 性 价 比 较 高 的 产品 。 除 
了 功能 必须 满足 需求 外 ,价格 是 另 一 个 重要 的 考虑 因素 。 测 试 工具 往往 价格 昂贵 ,所 以 价格 
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必须 在 能 承受 的 范围 中 。 另 外 ,借助 合适 的 开源 软件 测试 工具 ,同样 可 以 构造 完整 的 自动 化 
测试 解决 方案 ,又 能 大 大 降低 成 本 ,也 是 一 种 理想 的 选择 。 

测试 工具 的 集成 能 力 : 测试 工具 的 引入 是 一 个 长 期 的 过 程 ,应 该 是 伴随 着 测试 过 程 改 
进而 进行 的 一 个 持续 的 过 程 。 因 此 ,测试 工具 的 集成 能 力也 是 必须 考虑 的 因素 ,这 里 的 集成 
包括 两 个 方面 的 意思 ,首先 ,测试 工具 能 否 和 开发 工具 进行 良好 的 集成 ; 其 次 ,测试 工具 能 
够 和 其 他 测试 工具 进行 良好 的 集成 。 

测试 工具 的 易 用 性 : 利用 软件 测试 工具 实现 自动 化 测试 要 求 软件 测试 人 员 对 测试 工具 
有 全 面 深 入 的 了 解 ,只 有 很 好 地 熟悉 并 灵活 运用 测试 工具 才能 真正 发 挥 测试 工具 的 作用 , 因 
而 测试 工具 的 易 用 性 对 于 软件 测试 人 员 对 工具 的 掌握 程度 也 是 很 关键 的 。 

测试 工具 的 侧重 点 : 相当 一 部 分 测试 工具 都 有 它 自 己 的 侧重 点 ,如 工具 要 求 的 编码 规 
则 、 采 用 的 代码 质量 标准 、 适 用 的 测试 对 象 适 用 测试 环境 等 ,因而 需要 考虑 测试 工具 的 侧重 

测试 工具 引入 的 连续 性 和 一 致 性 : 测试 工具 是 测试 自动 化 的 一 个 重要 步骤 之 一 ,在 引 
入 /选择 测试 工具 时 ,必须 考虑 测试 工具 引入 的 连续 性 。 也 就 是 说 ,对 测试 工具 的 选择 必须 
有 一 个 全 盘 的 考虑 ,分 阶段 .逐步 地 引入 测试 工具 。 

测试 工具 的 技术 支持 : 引进 应 用 软件 测试 工具 是 一 个 长 期 的 过 程 , 当 工具 引进 之 后 ,其 
开发 的 公司 或 单位 能 否 提 供 良好 的 技术 支持 如 培训 测试 人 员 ,提供 详尽 的 使 用 说 明 、 实 例 ， 
能 否 提供 持续 的 升级 改进 等 ,是 引进 工具 需要 考虑 的 问题 。 如 人 们 熟悉 的 IBMRational Zt 
司 的 Robot 十 TestManager 拥有 较 多 的 技术 人 员 , 并 且 还 有 其 他 的 服务 提供 商 给 予 技术 

3. 选择 误区 

不 同 的 测试 工具 具有 各 自 的 特点 和 适用 范围 ,面向 的 对 象 也 不 同 ,因此 并 不 是 任何 一 个 
测试 工具 都 能 适应 每 个 公司 的 需求 。 有 些 公 司 花 巨 资 引进 了 市 场 上 最 昂贵 的 测试 工具 ,但 
是 并 不 适合 本 公司 的 实际 情况 ,最 后 只 能 成 为 摆设 而 已 。 因 此 ,在 选择 测试 工具 的 时 候 , 要 
本 着 适用 的 原则 ,针对 自己 的 软件 产品 ,能够 解决 测试 过 程 中 最 突出 的 问题 。 
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. 测试 工具 可 以 分 为 几 类 ? 

. 请 列举 常见 的 白 盒 测 试 工具 软件 名 称 ,并 加 以 对 比 。 
. 请 列举 常见 的 黑 盒 测试 工具 软件 名 称 ,并 加 以 对 比 。 
. 请 列举 常见 的 测试 管理 工具 软件 名 称 ,并 加 以 对 比 。 
. 请 列举 常见 的 性 能 测试 工具 软件 名 称 ,并 加 以 对 比 。 
. 测试 工具 的 选择 方法 有 哪 几 种 ? 


中 上 


黑 盒 测试 工具 与 白 盒 测 试 工具 | 


本 章 学 习 重 点 


* 了解 使 用 黑 盒 测试 工具 或 者 白 盒 测试 工具 进行 软件 测试 的 侧重 点 。 
。 熟悉 如 何 使 用 QTP 软件 进行 黑 盒 测 试 。 
* 熟悉 如 何 使 用 JUnit 软件 进行 白 盒 测 试 。 


本 章 学 习 难 点 

掌握 如 何 使 用 JUnit 软件 进行 白 盒 测试 。 
6.1 黑 盒 测试 工具 

— 


黑 盒 测试 也 称 功能 测试 , 它 是 通过 测试 来 检测 每 个 功能 是 否 都 能 正常 使 用 。 在 测试 中 ， 
把 程序 看 作 一 个 不 能 打开 的 黑 盒子 ,在 完全 不 考虑 程序 内 部 结构 和 内 部 特性 的 情况 下 ,在 程 
序 接口 进行 测试 , 它 只 检查 程序 功能 是 否 按照 需求 规格 说 明 书 的 规定 正常 使 用 ,程序 是 否 能 
适当 地 接收 输入 数据 而 产生 正确 的 输出 信息 。 黑 盒 测试 着 眼 于 程序 外 部 结构 ,不 考虑 内 部 
3E REA FJ ,主要 针对 软件 界面 和 软件 功能 进行 测试 。 本 节 以 HP QuickTest Professional 为 
例 ,讲解 在 测试 过 程 中 如 何 使 用 QTP 进行 自动 化 测试 。 


8.1.1 OTP 简介 


HP QuickTest Professional 提供 符合 所 有 主要 应 用 软件 环境 的 功能 测试 和 回归 测试 的 
自动 化 ,采用 关键 字 驱 动 的 理念 以 简化 测试 用 例 的 创建 和 维护 。 它 让 用 户 可 以 直接 录制 屏 
幕 上 的 操作 流程 ,自动 生成 功能 测试 或 者 回归 测试 用 例 。 专 业 的 测试 者 也 可 以 通过 提供 的 
内 置 脚本 和 调试 环境 来 取得 对 测试 和 对 象 属性 的 完全 控制 。 

QTP 进行 功能 测试 的 测试 流程 大 致 有 以 下 5 个 步骤 。 


1. 制定 测试 计划 
自动 测试 的 测试 计划 是 根据 被 测 项 目的 具体 需求 ,以 及 所 使 用 的 测试 工具 而 制定 的 , 完 
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全 用 于 指导 测试 全 工程 。QTP 是 一 个 功能 测试 工具 ,主要 帮助 测试 人 员 完 成 软件 的 功能 测 
试 。 与 其 他 测试 工具 一 样 ,QTP 不 能 完全 取代 测试 人 员 的 手工 操作 ,但 是 在 某 个 功能 点 上 ， 
使 用 QTP 的 确 能 够 帮助 测试 人 员 做 很 多 工作 。 在 测试 计划 阶段 ,首先 要 做 的 就 是 分 析 被 
测 应 用 的 特点 ,决定 应 该 对 哪些 功能 点 进行 测试 ,可 以 考虑 细 化 到 具体 页 面 或 者 具体 控件 。 
对 于 一 个 普通 的 应 用 程序 来 说 ,QTP 应 用 在 某 些 界面 变化 不 大 的 回归 测试 中 是 非常 有 
效 的 。 


2. 创建 测试 脚本 


当 测 试 人 员 浏 览 站 点 或 在 应 用 程序 上 操作 的 时 候 ,QTP 的 自动 录制 机 制 能 够 将 测试 人 
员 的 每 一 个 操作 步骤 及 被 操作 的 对 象 记录 下 来 ,自动 生成 测试 脚本 语句 。 与 其 他 自动 测试 
工具 录制 脚本 有 所 不 同 的 是 ,QTP 除了 以 VBScript 脚本 语言 的 方式 生成 脚本 语句 以 外 ,还 
将 被 操作 的 对 象 及 相应 的 动作 按照 层次 和 顺序 保存 在 一 个 基于 表格 的 关键 字 视 图 中 。 例 
如 , 当 测试 人 员 单 击 一 个 链接 ,然后 选择 一 个 复 选 框 或 者 提交 一 个 表单 ,这 样 的 操作 流程 都 
会 被 记录 在 关键 字 视 图 中 。 


3. 增强 测试 脚本 的 功能 


录制 脚本 只 是 实现 创建 或 者 设计 脚本 的 第 一 步 ,基本 的 脚本 录制 完毕 后 ,测试 人 员 可 以 
根据 需要 增加 一 些 扩展 功能 ,QTP 允许 测试 人 员 通 过 在 脚本 中 增加 或 更 改 测 试 步骤 来 修正 
或 自 定义 测试 流程 ,如 增加 多 种 类 型 的 检查 点 功能 , 既 可 以 让 QTP 检查 在 程序 的 某 个 特定 
位 置 或 对 话 框 中 是 否 出 现 了 需要 的 文字 ,还 可 以 检查 一 个 链接 是 否 返 回 了 正确 的 URL 地 
址 等 。 还 可 以 通过 参数 化 功能 ,使 用 多 组 不 同 的 数据 驱动 整个 测试 过 程 。 


4. 运行 测试 


QTP 从 脚本 的 第 一 行 开始 执行 语句 ,运行 过 程 中 会 对 设置 的 检查 点 进行 验证 ,用 实际 
数据 代替 参数 值 , 并 给 出 相应 的 输出 结构 信息 。 测 试 过程 中 ,测试 人 员 还 可 以 调试 自己 的 脚 
本 ,直到 脚本 完全 符合 要 求 。 


5. 分 析 测 试 结果 


运行 结束 后 系统 会 自动 生成 一 份 详细 完整 的 测试 结果 报告 。 

Mercury QuickTest Professional 甚至 可 以 使 新 测试 人 员 在 几 分 钟 内 提高 效率 。 测 试 
人 员 只 需 通 过 单 击 “ 记 录 ” 按 钮 ,并 使 用 执行 典型 业务 流程 的 应 用 程序 即 可 创建 测试 脚本 。 
系统 使 用 简明 的 英文 语句 和 屏幕 抓 图 来 自动 记录 业务 流程 中 的 每 个 步 又。 用 户 可 以 在 关键 
字 视 图 中 轻松 修改 .删除 或 重新 安排 测试 步 又。QuickTest Professional 可 以 自动 引入 检查 
点 ,以 验证 应 用 程序 的 属性 和 功能 ,例如 ,验证 输出 或 检查 链接 有 效 性 。 对 于 关键 字 视 图 中 
的 每 个 步骤 ,活动 屏幕 均 准 确 显示 测试 中 应 用 程序 处 理 此 步 又 的 方式 。 也 可 以 为 任何 对 象 
添加 几 种 类 型 的 检查 点 ,以便 验 证 组 件 是 否 按 预期 运行 (只 需 在 活动 屏幕 中 单 击 此 对 象 即 
可 )。 然 后 ,可 以 在 产品 介绍 (具有 Excel 所 有 功能 的 集成 电子 表格 ) 中 输入 测试 数据 ,以 便 
在 不 需要 编程 的 情况 下 处 理 数据 集 和 创建 多 个 测试 迭代 ,从 而 扩大 测试 案例 范围 。 可 以 输 
入 数据 ,或 从 数据 库 、 电 子 表格 或 文本 文件 中 导入 数据 。 


163 


Ë` 


164 


N 


实用 软件 测试 


高 级 测试 人 员 可 以 在 专家 视图 中 查看 和 编辑 自己 的 测试 脚本 ,该 视图 显示 QuickTest 
Professional 自动 生成 的 基于 业界 标准 的 内 在 VB 脚本 。 专 家 视图 中 进行 的 任何 变动 自动 
与 关键 字 视 图 同步 。 

一 旦 测试 人 员 运行 了 脚本 ,TestFusion 报告 显示 测试 运行 的 所 有 方面 : 高 级 结果 概述 ， 
准确 指出 应 用 程序 故障 位 置 的 可 扩展 树 视 图 ,使 用 的 测试 数据 ,突出 显示 任何 差异 的 应 用 程 
序 屏幕 抓 图 ,以 及 每 个 通过 和 未 通过 检查 点 的 详细 说 明 。 通 过 使 用 Mercury TestDirector 
合并 TestFusion 报告 ,可 以 在 整个 QA 和 开发 团队 中 共享 报告 。 

QuickTest Professional 也 加 快 了 更 新 流程 。 当 测试 中 应 用 程序 出 现 变 动 (例如 “登录 ” 
按钮 重 命名 为 “登入”) 时 ,可 以 对 共享 对 象 库 进行 一 次 更 新 ,然后 此 更 新 将 传播 到 所 有 引用 
该 对 象 的 脚本 。 可 以 将 测试 脚本 发 布 到 Mercury TestDirector, 使 其 他 QA 团队 成 员 可 以 
重复 使 用 测试 脚本 ,从 而 消除 了 重复 工作 。 


8.1.2 录制 测试 脚本 
1. 录制 测试 脚本 


Mercury Tours 示范 网 站 是 一 个 提供 机 票 预订 服务 的 网 站 , 接 下 来 ,使 用 MI 公司 提供 
的 Mercury Tours 示范 网 站 作为 演示 QuickTest 各 个 功能 的 例子 程序 。 

CD 执行 QuickTest 并 开启 一 个 全 新 的 测试 脚本 。 

开启 QuickTest, 在 Add-in Manager 窗口 中 选择 Web 选项 , 单 击 OK 按钮 关闭 Add-in 
Manager 窗口 ,进入 QuickTest Professional 主 窗口 。 

如 果 QuickTest Professional 已 经 启动 ,检查 Help—> About QuickTest Professional # 
看 目前 加 载 了 哪些 add-ins。 如 果 没 有 加 载 Web, 那 么 必须 关闭 并 重新 启动 Quick Test 
Professional, 然 后 在 Add-in Manager 窗口 中 选择 Web, 

如 果 在 执行 QuickTest Professional 时 没有 开启 Add-in Manager. 则 单 击 Tool 一 
Options, fE General 选项 卡 中 勾 选 Display Add-in Manager on Startup. 在 下 次 执行 
QuickTest Professional 时 就 会 看 到 Add-in Manager 窗口 。 

(2) 开始 录制 测试 脚本 。 

选中 Test Record 或 者 单 击 工具 栏 上 的 Record 按钮 ,打开 Record and Run Settings 
对 话 框 ,如 图 8-1 所 示 。 

在 Web 选项 卡 中 选择 Open the following browser when a record or run session begins 
单 选 按钮 ,在 Type 下 拉 列 表 中 选择 Microsoft Internet Explorer 为 浏览 器 的 类 型 ; 在 
Address 中 添加 http://newtours. mercuryinteractive. com/。 这 样 , 在 录制 的 时 候 ， 
QuickTest 会 自动 打开 I 下 浏览 器 并 连接 到 Mercury Tours 范例 网 站 上 。 

现在 切换 到 Windows Applications 选项 卡 , 如 图 8-2 所 示 。 

如 果 选 择 Record and run test on any open Windows-based application 单 选 按钮 , 则 在 
录制 过 程 中 ,QuickTest 会 记录 用 户 对 所 有 的 Windows 程序 所 做 的 操作 。 如 果 选 择 Record 
and run on these applications (opened a session start) 单 选 按钮 , 则 在 录制 过 程 中 ， 
QuickTest 只 会 记录 对 那些 添加 到 下 面 Application details 列表 框 中 的 应 用 程序 的 操作 (可 
以 通过 Add、Edit、Delete 按钮 来 编辑 这 个 列表 ) 。 
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图 8-1 Record and Run Settings 对 话 框 


图 8-2 Windows Applications 选项 卡 


这 里 选择 第 二 个 单 选 按钮 。 因 为 这 里 只 是 对 Mercury Tours 范例 网 站 进行 操作 ,不 涉 
及 Windows 程序 ,所 以 保持 列表 为 空 。 

单 击 Apply 按钮 ,开始 录制 ,将 自动 打开 TE 浏览 器 并 连接 到 Mercury Tours 范例 网 
站 上 。 

(3) 登录 Mercury Tours 网 站 。 

在 用 户 名 和 密码 文本 框 中 输入 注册 时 使 用 的 账号 和 密码 , 单 击 Sign-in, 进 入 Flight 
Finder 网 页 。 

(4) 输入 订 票 数据 。 

输入 以 下 订 票 数据 : 
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Departing From: New York 
On: May 14 

Arriving In: San Francisco 
Returning: May 28 


Service Class: Business class 


其 他 字段 保留 默认 值 , 单 击 CONTINUE 按钮 打开 Select Flight 页 面 。 


(5) 选择 飞机 航班 。 


可 以 保存 默认 值 , 单 击 CONTINUE 按钮 打开 Book a Flight 页 面 。 


(6) 输入 必 填 字段 (红色 字段 ) 。 


输入 用 户 名 和 信用 卡号 码 (信用 卡 可 以 输入 虚构 的 号 码 , 如 8888-8888), 
单 击 网 页 下 方 的 SECURE PURCHASE 按钮 ,打开 Flight Confirmation 网 页 。 


(7) 完成 定制 流程 。 


查看 订 票 数据 ,并 选择 BACK TO HOME 回 到 Mercury Tours 网 站 首页 。 


(8) 停止 录制 。 


在 QuickTest 工具 列 上 单 击 Stop 按钮 ,停止 录制 。 


到 这 里 已 经 完成 了 预订 从 纽约 到 旧金山 机 票 的 动作 ,并 且 Quick Test 已 经 录制 了 从 单 


ii Record 按钮 后 到 Stop 按钮 之 间 的 所 有 操作 。 


(9) 保存 脚本 。 


选择 Filees”=Save 或 者 单 击 工具 栏 上 的 Save 按钮 ,开启 Save 对 话 框 。 选 择 路 径 ,填写 文 


件 名 ,这 里 取 名 为 Flight。 单 击 “ 保 存 ” 按 钮 进行 保存 。 


通过 以 上 9 个 步骤 ,录制 了 一 个 完整 的 测试 脚本 一 一 预订 从 纽约 到 旧金山 的 机 票 。 


2. 分 析 录 制 的 测试 脚本 


在 录制 过 程 中 ,QuickTest 会 在 测试 脚本 管理 窗口 (也 叫 Tree View 窗口 ) 中 产生 对 每 
一 个 操作 的 相应 记录 ,并 在 Keyword View 中 以 类 似 Excel 工作 表 的 方式 显示 所 录制 的 测 
试 脚本 。 当 录制 结束 后 ,QuickTest 也 就 记录 下 测试 过 程 中 的 所 有 操作 。 测 试 脚本 管理 窗 


口 显 示 的 内 容 如 图 8-3 所 示 。 
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图 8-3 测试 脚本 管理 窗口 
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在 Keyword View 中 的 每 一 个 字段 都 有 其 意义 。 
(1) Item: 以 阶层 式 的 图 标 表 示 这 个 操作 步骤 所 作用 的 组 件 ( 测 试 对 象 .工具 对 象 函 


数 呼叫 或 脚本 ) 。 


(2) Operation: 要 在 这 个 作用 到 的 组 件 上 执行 的 动作 ,如 单 击 .选择 等 。 
(3) Value; 执行 动作 的 参数 ,例如 , 当 鼠 标 单 击 一 张 图 片 时 是 用 左 键 还 是 右键 。 


(4) Assignment: 使 用 到 的 变量 。 


(5) Comment; 在 测试 脚本 中 加 入 的 批注 。 
(6) Documentation; 自动 产生 用 来 描述 此 操作 步骤 的 英文 说 明 。 
脚本 中 的 每 一 个 步骤 在 Keyword View 中 都 会 以 一 列 来 显示 ,其 中 包含 用 来 表示 此 组 


件 类 别 的 图 标 以 及 此 步骤 的 详细 数据 。 


下 面 针对 一 些 常见 的 操作 步骤 做 详细 说 明 ,如 表 8-1 所 示 。 
表 8-1 常见 的 操作 步骤 与 说 明 


步 m 说 9 
Actionl 是 一 个 动作 的 名 称 
Fl Welcome: Mercury Tours Welcome; Mercury 是 被 浏览 器 开启 的 网 站 的 名 称 


welcome: Mercury Tours 


Welcome: Mercury Tours 是 网 页 的 名 称 


BE userName Set ient" 


userName 是 edit box 的 名 称 
Set 是 在 这 个 edit box 上 执行 的 动作 
lghl 是 被 输入 的 值 


BE password |[SetSecure "446845b(84444adc2... 


password 是 edit box 的 名 称 

SetSecure 是 在 这 个 edit box 上 执行 的 动作 ,此 动作 
有 加 密 的 功能 
446845bf84444adc… 是 被 加 密 过 的 密码 


Ë) Sign-In Cick — 414 


3. 执行 测试 脚本 


Sign-In 是 图 像 对 象 的 名 称 
Click 是 在 这 个 图 像 上 执行 的 动作 
41,4 则 是 这 个 图 像 被 单 击 的 X,Y 坐标 


当 运 行 录制 好 的 测试 脚本 时 ,QuickTest 会 打开 被 测试 程序 ,执行 在 测试 中 录制 的 每 一 
个 操作 。 测 试 运行 结束 后 ,QuickTest 显示 本 次 运行 的 结果 。 接 下 来 ,执行 录制 的 Flight 测 


试 脚本 。 
CD 打开 录制 的 Flight 测试 脚本 。 


(2) 设置 运行 选项 。 单 击 Tool-~Options 打开 Options 对 话 框 ,选择 Run 选项 卡 ,如 


图 8-4 所 示 。 


如 果 要 将 所 有 画面 储存 在 测试 结果 中 ,在 Save step screen capture to results 选项 中 选 
择 Always 选项 。 一 般 情 况 下 选择 On errors 或 On error and warning 表示 在 回放 测试 过 程 
中 出 现 问题 时 , 才 保 存 图 像 信息 。 在 这 里 为 了 更 多 地 展示 QuickTest 的 功能 ,所 以 选择 使 用 


Always 选项 。 
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图 8-4 Options 对 话 框 
(3) 在 工具 条 上 单 击 Run 按钮 ,打开 Run 对 话 框 ,如 图 8-5 所 示 。 


Run [ 


图 8-5 Run 对 话 框 


询问 要 将 本 次 的 测试 运行 结果 保存 到 何 处 。 选 择 New run results folder 单 选 按钮 , 设 
定好 存放 路 径 ( 在 这 里 使 用 预 设 的 测试 结果 名 称 ) 。 

(4) 单 击 OK 按钮 开始 执行 测试 。 

可 以 看 到 ,QuickTest 按照 在 脚本 中 录制 的 操作 ,一 步 一 步 地 运行 测试 ,操作 过 程 与 手 
工 操作 时 完全 一 样 。 同 时 ,可 以 在 QuickTest 的 Keyword View 中 出 现 一 个 黄色 的 箭头 , 指 
示 目 前 正在 执行 的 测试 步骤 。 


4. 分 析 测 试 结果 


在 测试 执行 完成 后 ,QuickTest 会 自动 显示 测试 结果 窗口 ,如 图 8-6 所 示 。 
在 这 个 测试 结果 窗口 中 分 为 两 个 部 分 显示 测试 执行 的 结果 。 
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E Flight [Res1] - Test Results 


Fie a ele >| 


= RanrTins Data 
Be [Mie Iteration 1 四 


Flight Results Summary 


Test Flight 
Results name : Res1 

Time Zone: 中 国标 准时 间 

Run started: 2006-5-19-1440:01 
Run ended: 2006-5-19 - 14:40:35. 


iteration # 
L 


Status 
Passed 
Failed 

Warnings 


图 8-6 测试 结果 窗口 


(1) 左边 以 阶层 图 标的 方式 显示 测试 脚本 所 执行 的 步骤 。 可 以 单 击 * 十 ”检查 每 一 个 步 
又 ,所 有 的 执行 步骤 都 会 以 图 示 的 方式 显示 。 可 以 设 定 QuickTest 以 不 同 的 方式 执行 每 个 
测试 或 某 个 动作 ,每 执行 一 次 反复 称 为 一 个 迭代 ,每 一 次 迭代 都 会 被 编号 (在 上 面 的 例子 中 
只 执行 了 一 次 迭代 )。 

(2) 右边 则 是 显示 测试 结果 的 详细 信息 。 在 第 一 个 表格 中 显示 哪些 迭代 是 已 经 通过 
的 ,哪些 是 失败 的 。 第 二 个 表格 是 显示 测试 脚本 的 检查 点 ,哪些 是 通过 的 ,哪些 是 失败 的 ,以 
及 有 几 个 警告 信息 。 

在 上 面 的 测试 中 ,所 有 的 测试 都 是 通过 的 ,在 脚本 中 也 没有 添加 检查 点 (有 关 检 查 点 的 
内 容 将 在 以 后 的 课程 中 学 习 ) 。 接 下 来 查看 QuickTest 执行 测试 脚本 的 详细 结果 ,以 及 选择 
某 个 测试 步骤 时 出 现 的 详细 信息 。 

在 树 视 图 中 展开 Flight Iteration 1(Row 1)—> Actionl Summary— Welcome Mercury 
Tours—Find a Flight: Mercury ,选择 "fromPost" : Select "New York" ,如 图 8-7 所 示 。 

在 这 个 测试 结果 窗口 中 显示 三 个 部 分 ,分 别 如 下 。 

(1) 左边 是 Test results tree: 展开 树 视 图 后 ,显示 了 测试 执行 过 程 中 的 每 一 个 操作 步 
了 又。 选择 某 一 个 测试 步骤 ,会 在 右边 区 域 显示 相应 的 信息 。 

(2) 右上 方 是 Test results detail; 对 应 当前 选中 的 测试 步骤 ,显示 被 选取 测试 步骤 执行 
时 的 详细 信息 。 

G) 右 下 方 是 Active Screen: 对 应 当前 选中 的 测试 步骤 ,显示 该 操作 执行 时 应 用 程序 
的 屏幕 截图 。 


È Flicht [Res1] 


Step Name: "fromPort":Select "New York" 


Step Done 


Object Details Result Time 


*fromPon":Select "New Select "New Do 2006-5-19- 
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B8 "bay" Select “28° 
"sersClass":Select “Busines 
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your destination city. 
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Type: @ RoundTrip © OneWay 
Passengers: [1 Z] 
Departing From: [New Yor 可 
VERSION o [My H 
Urs Java Version Arving in: [Acspulco E] 
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Preferences 
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图 8-7 展开 树 视图 


当选 中 Test results tree 上 的 网 页 图 示 时 ,会 在 Active Screen 中 看 到 执行 时 的 画面 。 
当选 中 Test results tree 上 的 测试 步骤 (在 某 个 对 象 上 执行 某 个 动作 ) 时 ,除了 显示 当前 的 画 
面 外 ,对 象 还 会 被 粉色 的 方 框框 住 。 在 上 面 的 例子 中 ,在 Active Screen 中 单 击 被 框 住 的 
Departing From 下 拉 菜 单 , 会 显示 其 他 的 选项 。 


8.1.3 建立 检查 点 


通过 8.1.2 节 的 学 习 , 读 者 已 经 掌握 了 如 何 录制 、 执 行 测试 脚本 以 及 查看 测试 结果 。 
但 是 这 只 是 实现 了 测试 执行 的 自动 化 ,没有 实现 测试 验证 的 自动 化 ,所 以 这 并 不 是 真正 
的 自动 化 测试 。 在 这 一 节 将 学 习 如 何在 测试 脚本 中 设置 检查 点 ,以 验证 执行 结果 的 正 
确 性 。 
“检查 点 ”是 将 指定 属性 的 当前 值 与 该 属性 的 期 望 值 进行 比较 的 验证 点 。 这 能 够 确定 网 
站 或 应 用 程序 是 否 正 常 运行 。 当 添加 检查 点 时 ,QuickTest 会 将 检查 点 添加 到 关键 字 视 图 
中 的 当前 行 并 在 专家 视图 中 添加 一 条 “检查 检查 点 ”语句 。 运 行 测试 或 组 件 时 , QuickTest 
会 将 检查 点 的 期 望 结果 与 当前 结果 进行 比较 。 如 果 结 果 不 匹配 ,检查 点 就 会 失败 。 可 以 在 
“测试 结果 ”窗口 中 查看 检查 点 的 结果 。 


1. QuickTest 检查 点 种 类 
首先 了 解 一 下 QuickTest 支持 的 检查 点 种 类 ,如 表 8-2 所 示 。 
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表 8-2 QuickTest 检查 点 种 类 


检查 点 类 型 i" # Bl 

标准 检查 点 检查 对 象 的 属性 检查 某 个 按钮 是 否 被 选中 

图 片 检查 点 检查 图 片 的 属性 检查 图 片 的 来 源 文件 是 否 是 正确 的 

表格 检查 点 检查 表格 的 内 容 检查 表格 内 的 内 容 是 否 是 正确 的 

网 页 检查 点 检查 网 页 的 属性 检查 网 页 加 载 的 时 间或 网 页 是 否 含有 不 正确 的 链接 

检查 网 页 上 或 是 窗口 上 . 

文字 /文字 区 域 检查 点 | 4 i agg “| 检查 登录 系统 后 是 否 出 现 * 登 录 成 功 "的 文字 

" 提取 网 页 和 窗口 的 画面 = _ 

图 像 检 查 点 ha misa CN 检查 网 页 或 者 网 页 的 一 部 分 是 否 如 期 显示 

数据 库 检查 点 DONG essent 
XML 检测 点 有 两 种 一 XML 文件 检测 点 和 XML 应 用 

XML 检查 点 检查 XML 文件 的 内 容 | 检测 点 。XML 文件 检测 点 用 于 检查 一 个 XML 文件 
XML 应 用 检测 点 用 于 检查 一 个 Web 页 面 的 XML 文档 


可 以 在 录制 测试 的 过 程 中 或 录制 结束 后 ,向 测试 脚本 中 添加 检测 点 。 下 面 学 习 如 何在 
测试 脚本 上 建立 检查 点 。 


2. 创建 检查 点 


打开 Flight 测试 脚本 ,将 脚本 另存 为 Checkpoint 测试 脚本 。 在 Checkpoint 测试 脚本 
中 创建 4 个 检查 点 ,分别 是 对 象 检 查 、 网 页 检查 ,文字 检查 以 及 表格 检查 。 

1) 对 象 检查 

通过 向 测试 或 组 件 中 添加 标准 检查 点 ,可 以 对 不 同 版 本 的 应 用 程序 或 网 站 中 的 对 象 
属性 值 进行 比较 。 可 以 使 用 标准 检查 点 来 检查 网 站 或 应 用 程序 中 的 对 象 属性 值 。 标 准 
检查 点 将 对 录制 期 间 捕 获 的 对 象 属性 的 预期 值 , 与 运行 会 话 期 间 对 象 的 当前 值 进行 
比较 。 

首先 在 Checkpoint 测试 脚本 上 添加 一 个 标准 检查 点 ,这 个 检查 点 用 于 检查 旅客 的 
姓氏 。 

创建 标准 检查 点 步骤 如 下 。 

(1) 打开 Checkpoint 测试 脚本 。 

(2) 选择 要 建立 检查 点 的 网 页 。 

在 QuickTest 的 视图 树 中 展开 Actionl Welcome: Mercury Tours— Book a Flight: 
Mercury, 由 于 输入 使 用 者 姓氏 的 测试 步骤 是 passFirst0 这 个 步骤 ,所 以 要 选择 这 个 步骤 的 
下 一 个 测试 步骤 ,以 便 建 立 检查 点 ,如 图 8-8 所 示 。 

(3) 建立 标准 检查 点 。 

对 Active Screen 中 的 First Name 编辑 框 单 击 鼠 标 右键 , 显 示 插 入 选择 点 的 类 型 ,如 
图 8-9 所 示 。 

选择 Insert Standard Checkpoint 选项 ,显示 Object Selection-Checkpoint Properties 对 
话 框 ,如 图 8-10 所 示 。 
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E > ET 
[Arenan Enesa] 「 [nose] [o E] 


rtt Made 


WebT able : Please review your travel itinerary and m 
日 四 WebT able : Please review your travel itinerary at 
日 四 WebTable : Summary 
E) EË) WebT able : First Name: 
G 


8-9 显示 插入 选择 点 的 类 型 8-10 Object Selection-Checkpoint Properties 对 话 框 


确保 当前 的 焦点 定位 在 WebEdit: passFirst0 上 , 单 击 OK 按钮 ,弹出 如 图 8-11 所 示 的 

在 检查 点 属性 对 话 框 中 会 显示 检查 点 的 属性 。 

(D Name; 检查 点 的 名 称 。 

@ Class: 检查 点 的 类 别 ,WebEdit 表示 这 个 检查 点 是 一 个 输入 框 。 

© Type 字段 中 的 ABC 图 标 : 表示 这 个 属性 的 值 是 一 个 常数 。 

对 于 每 一 个 检查 点 ,QuickTest 会 使 用 预 设 的 属性 作为 检查 点 的 属性 , 表 8-3 说 明了 这 
些 预 设 的 属性 。 
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图 8-11 检查 点 属性 
表 8-3 预 设 属性 的 说 明 


属性 值 说 明 
html tag INPUT HTML 原始 码 中 的 INPUT 标签 
innertext 在 这 个 范例 中 ,innertext 只 是 空 的 ,检查 点 会 检查 当 执行 时 
这 个 属性 是 不 是 空 的 
name passFirst0 passFirst0 是 这 个 编辑 框 的 名 称 
type text text 是 HTML 原始 码 中 INPUT 对 象 的 类 型 


value ”姓氏 (录制 脚本 时 输入 的 姓氏 ) 在 编辑 框 中 输入 的 文字 
接受 预 设 的 设 定 值 , 单 击 OK 按钮 。QuickTest 会 在 选取 步骤 之 前 建立 一 个 标准 检查 
点 ,如 图 8-12 所 示 。 


2) Book a Fight: Mercuy ] l l 
Se Enter "T*in the "passFistÜ" edit box 


(4) 在 工具 栏 上 单 击 Save 按钮 保存 脚本 。 


通过 (1) 一 (4) 的 步骤 ,添加 一 个 标准 检查 点 的 操作 到 此 结束 。 
2) 网 页 检查 


在 Checkpoint 测试 脚本 中 再 添加 一 个 网 页 检查 点 ,网 页 检查 点 会 检查 网 页 的 链接 以 及 
图 像 的 数量 是 否 与 当前 录制 时 的 数量 一 致 。 网 页 检查 点 只 能 应 用 于 Web 页 面 中 。 

创建 网 页 检查 点 的 步骤 如 下 。 

CD 选择 要 建立 检查 点 的 网 页 。 


展开 Actionl > Welcome: Mercury Tours. 选择 Book a Flight; Mercury 页 面 ,在 
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Active Screen 中 会 显示 相应 的 页 面 。 

(2) 建立 网 页 检查 点 。 

在 Active Screen 上 的 任意 地 方 单 击 鼠 标 右键 ,选中 Insert Standard Checkpoint 选项 ， 
开启 Object Selection-Checkpoint Properties 对 话 框 ( 由 于 选择 的 位 置 不 同 , 对 话 框 中 显示 
被 选取 的 对 象 可 能 不 一 样 ) ,如 图 8-13 所 示 。 

选择 最 上 面 的 Page: Book a Flight; Mercury, 并 单 击 OK 按钮 确认 ,将 打开 Page 
Checkpoint Properties 对 话 框 ,如 图 8-14 所 示 。 


‘WebTable : SIGN-OFF 
HEE WebT able : Please review your travel itinerary and m 
日 四 webTable : Please review your travel itinerary ar 


EFH WebTable : Summary F. 
E) EB WebTable: New York to San Francisco) 


图 8-13 Object Selection-Checkpoint Properties 对 话 框 8-14 Page Checkpoint Properties 对 话 框 


当 执行 测试 时 ,QuickTest 会 检查 网 页 的 链接 与 图 片 的 数量 ,以 及 加 载 的 时 间 , 如 同 对 
话 框 上 方 所 显示 的 那样 。 

QuickTest 也 检查 每 一 个 链接 的 URL 以 及 每 一 个 图 片 的 原始 文件 是 否 存在 。 

(3) 接受 默认 设 定 , 单 击 OK 按钮 。QuickTest 会 在 Book a Flight: Mercury 网 页 上 加 
一 个 网 页 检查 。 

(4) 在 工具 栏 上 单 击 Save 按钮 保存 脚本 。 

3) 文字 检查 

下 面 建立 一 个 文字 检查 点 ,检查 在 Flight Confirmation 网 页 中 是 否 出 现 “New York" 
文字 。 

建立 文字 检查 点 的 步骤 如 下 。 
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CD 确定 要 建立 检查 点 的 网 页 。 

展开 Actionl— Welcome: Mercury Tours 选择 Flight Confirmation; Mercury 页 面 ,在 
Active Screen 中 会 显示 相应 的 页 面 。 

(2) 建立 文字 检查 点 。 

在 Active Screen 中 选择 在 Departing 下 方 的 New York。 

对 选取 的 文字 单 击 鼠标 右键 ,并 选取 Insert 
Text Checkpoint 选项 打开 Text Checkpoint 
Properties 对 话 框 ,如 图 8-15 所 示 。 

当 Checked Text 出 现在 下 拉 列 表 中 时 ,在 
Constant 字段 中 显示 的 就 是 选取 的 文字 。 这 也 
就 是 QuickTest 在 执行 测试 脚本 时 所 要 检查 的 
文字 。 

(3) 单 击 OK 按钮 关闭 对 话 框 。 

QuickTest 会 在 测试 脚本 上 加 上 一 个 文字 
检查 点 , 这 个 文字 检查 点 会 出 现在 Flight 
Confirmation: Mercury 网 页 下 方 。 

(4) 在 工具 栏 上 单 击 Save 按钮 保存 脚本 。 

4) 表格 检查 

通过 添加 表 检 查 点 ,可 以 检查 应 用 程序 中 
显示 的 表 的 内 容 。 通 过 向 测试 或 组 件 中 添加 表 ”图 8-15 Text Checkpoint Properties 对 话 框 
检查 点 ,可 以 检查 表 的 单元 格 中 是 否 显示 了 指 
定 的 值 。 对 于 ActiveX 表 , 还 可 以 检查 表 对 象 的 属性 。 要 添加 表 检 查 点 ,可 使 用 “检查 点 属 
性 ”对 话 框 。 

前 面 已 经 添加 了 标准 、 网 页 文字 检查 点 , 接 下 来 在 Checkpoint 测试 脚本 中 再 添加 一 个 
表格 检查 点 ,检查 Book a Flight; Mercury 网 页 上 航班 的 价格 。 

创建 表格 检查 点 的 步骤 如 下 。 

CD 选取 要 建立 检查 点 的 网 页 。 

展开 Actionl > Welcome: Mercury Tours 选择 Book a Flight: Mercury 页 面 ,在 
Active Screen 中 会 显示 相应 的 页 面 。 

(2) 建立 表格 检查 点 。 

在 Active Screen 中 ,在 第 一 个 航班 的 价钱 270 上 单 击 鼠标 右键 ,选择 Insert Standard 
Checkpoint 选项 打开 Object Selection-Checkpoint Properties 对 话 框 ,如 图 8-16 所 示 。 

刚 打 开 时 选取 的 是 WebElement:270, 这 时 要 选择 上 一 层 的 WebTable 对 象 ,在 这 个 例 
子 中 选择 WebTable: New York to San Francisco。 单 击 OK 按钮 打开 Table Checkpoint 
Properties 对 话 框 ,显示 整个 表格 的 内 容 , 如 图 8-17 所 示 。 

预 设 每 一 个 字段 都 会 被 选择 ,表示 所 有 字段 都 会 检查 ,可 以 对 某 个 字段 双击 ,取消 检查 
字段 ,或 者 选择 整个 栏 和 列 ,执行 选取 或 取消 的 动作 。 
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图 8-16 Object Selection-Checkpoint 8-17 Table Checkpoint Properties 对 话 框 
Properties 对 话 框 


在 每 个 字段 的 列 标题 上 双击 ,取消 勾 选 的 图 标 , 然 后 在 270 字段 处 双击 ,这 样 执行 时 
QuickTest 只 会 对 这 个 字段 值 做 检查 ,如 图 8-18 
"a. 

infa B — E sis] 

C3) 单 击 OK 按钮 关闭 对 话 框 。 

QuickTest 会 在 测试 脚本 中 , Book a Flight: 

Mercury 页 面 下 加 上 一 个 表格 检查 点 。 
(4) 在 工具 栏 上 单 击 Save 按钮 保存 脚本 。 


图 8-18 字段 值 检 查 


3. 执行 并 分 析 使 用 检查 点 的 测试 脚本 


前 面 在 脚本 中 添加 了 4 个 检查 点 ,现在 ,运行 Checkpoint 测试 脚本 ,分 析 插 入 检查 点 后 
脚本 的 运行 情况 。 

CD 在 工具 栏 上 单 击 Run 按钮 ,弹出 如 图 8-19 所 示 的 对 话 框 。 

这 个 页 面 是 询问 将 本 次 测试 结果 保存 在 哪个 目录 ,选择 New run results folder 单 选 按 
钮 ,接受 默认 设置 , 单 击 OK 按钮 确认 。 这 时 QuickTest 会 按照 脚本 中 的 操作 ,一 步 一 步 进 
行 测 试 ,操作 过 程 和 手工 操作 是 完全 一 样 的 。 

(2) 当 QuickTest 执行 完 测试 脚本 后 ,测试 执行 结果 窗口 会 自动 开启 。 如 果 所 有 的 检 
查 点 都 通过 了 验证 ,运行 结果 为 Passed。 如 果 有 一 个 或 多 个 检查 点 没有 通过 验证 , 则 运行 
结果 显示 为 Failed, 如 图 8-20 所 示 。 

在 图 8-20 中 可 以 看 到 ,设置 的 4 个 检查 点 都 通过 了 验证 ,下 面 看 一 下 各 个 检查 点 的 验 
证 结果 。 
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Checkpoint Results Summary 


-vO Checkpoint Iteration 


Test Checkpoint 
Results name : Rest 

Time Zone: 中 国标 准时 间 

Run started: 2006-5-19-135117 
Run ended: 2006-5-19 -13:52:22 


iteration # 
1 


图 8-20 测试 运行 结果 


1) 验证 网 页 检查 点 

在 Test results tree 中 展开 Checkpoint Iteration 1 (Row 1) — Actionl Summary 一 ~ 
Welcome: Mercury Tours— Book a Flight; Mercury, 并 选择 Checkpoint" Book a Flight: 
Mercury", 

在 右边 的 Details 窗口 中 ,可 以 看 到 网 页 检查 点 的 详细 信息 。 例 如 ,网 页 检查 点 检查 了 
哪些 项 目 , 如 图 8-21 所 示 。 

由 于 所 有 网 页 检查 的 项 目 ,其 实际 值 与 预期 值 相 符 , 所 以 这 个 网 页 检查 点 的 结果 为 


Passed, 
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È Checkpoint [Resl] - Test Results 


Me xi 


File View Tools Help 
sévaena2aaa e|? 


k Test Checkpoint Summary 


BB am-rine Data 
[I Checkpoint Iteration 1 (Row 1) 
B StartUp Browser 


Ej w @ actioni Summary 


Eu B telcone: Mercury Tours 
由。 办 Welcome: Mercury Tou 
B dÀ Find a Flight: Mercu 
E- AÀ Select a Flight: Mer 
B dÀ Book a Flight: Mercu 

Eve BB Mew York to San F 
VY Checkpoint “Book 
Bl "passFirst0":Set 

Bl passFirst0 
“passLast0":Set 
BR "credi tnunber":Se. 
Bi buayFlichts" Clic 


spacer 
buyFlights 
Broken Links Results 


Link Name and Url 


Home 

(htip/newtours mercuryinteractive.com/tour/mercurywelcome.php) 
Flights 

(http //newtours.mercuryinteractive.com/tour/mercuryreservation.php) 
Hotels 

(http;/newtours.mercuryinteractive.com/tour/mercuryunderconst php) 
Car Rentals 

(http /newtours.mercuryinteractive.com/tour/mercuryunderconst php) 
Cruises 

(http. //newtours.mercuryinteractive.com/tour/mercuryunderconst php; = 


B. Z à] Flight Confirmation: 
É. dS Yelcome: Mercury Tou 


SA one cool š 
DIE 


For Help, press Fl 


图 8-21 网 页 检查 点 的 详细 信息 


2) 验证 表格 检查 点 

在 Test results tree 中 展开 Book a Flight: Mercury-* New York to San Francisco ,并 
选择 Checkpoint" New York to San Francisco" , 

f£ Details 窗口 中 可 以 看 到 表格 的 详细 结果 ,也 可 以 在 窗口 下 方 看 到 整个 表格 的 内 容 ， 
被 检查 的 字段 以 黑色 的 粗 体 文字 显示 ,没有 检查 的 字段 以 灰色 文字 显示 ,如 图 8-22 所 示 。 

这 个 表格 检查 点 检查 的 字段 值 ,其 实际 值 与 预期 值 相 符 ,所 以 检查 点 的 结果 为 Passed. 

3) 验证 标准 检查 点 

在 Test results tree 中 展开 Book a Flight: Mercury—> passFirst0 ,并 选择 Checkpoint" 
passFirst0"。 

在 Details 窗口 中 可 以 看 到 标准 检查 点 的 详细 结果 ,如 检查 了 哪些 属性 ,以 及 属性 的 值 ， 
如 图 8-23 所 示 。 

4) 验证 文字 检查 点 

在 Test results tree 中 展开 Checkpoint Iteration 1 (Row 1) — Actionl Summary > 
Welcome: Mercury Tours — Flight Confirmation: Mercury. 并 选择 Checkpoint" New 
York"。 显 示 如 图 8-24 所 示 界 面 , 因 为 文字 检查 点 的 实际 值 与 预期 值 相同 ,所 以 检查 点 的 结 
果 为 Passed。 
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Eile Yee Teols Help 
BETARANA + +?| 
E [Ñ Test Checkpoint Smaary 


Ef am-rine Data Standard Checkpoint "New York 


Ew Checkpoint Iteration 1 (Row 1) to San Francisco": Passed 
m- Ë StartUp Browser 


-vB actioni Summary Date and Time: 2006-5-19-13:51:44 
B ZË reme Mercury Tours 
D) Welcone: Mercury Tours x 
5 Find « Flight: Mercury Details 
sastu Rig: kray 
E AÀ Book a Flight: Mercury 
E-a SB New York to San Franci 
< V. Checkpoint “New Tor 
Š Checkpoint “Book a Fli 
WB “asspirst0":Set “1” 


Verification type: String Content Settings: Exact match - ON; 
Ignore space - ON: Match case - OFF. Results: Checked 1 
cells; Succeeded: 1; Failed: 0 


B) buypliohts Click 
-VI Flight Confirmation: Merc 
m N felcone: Mercury Tours 2 


For Help, press Fl 


图 8-22 表格 的 详细 结果 


Eile View Tools Help 
SGTARRAA| e >|? 
Test Checkpoint Summary 
BB Run-Time Dat 
Ei- CW Checkpoint Iteration 1 (Row 1) 


Be f StartUp Browser 
E-v Action! Summary passFirst0_3 Results 


Boe BÉ race: Mercury Tours Property Name Property Value 
AD Yelcome: Mercury Tours 
SÌ Find a Flight: Mercury html tag INPUT 
加 Select a Flight: Mercury innertext 
VIN Book a Flight: Mercury 
由 -w 四 New York to San Franci 
Š Checkpoint “Book a Fli pre ex 
BE "yassFiret0" Set "17 1 


Details 


name passFirstü 


Ew passPirst0 
$ STEMS 
VY Checkpoint "passFir. 
"passLast0" Set "eh” VERSION 
“ereditnumber":Set "88. = 
SB "buyPliahts :click 
43 Flight Confirmation. Mere SA. 
SA Yelcome: Mercury Tours 2 Last Name: 


Credit Card 
Card Type: Number. 


American Express S 


First Name: Middle: 


For Help, press FI 


图 8-23 标准 检查 点 的 详细 结果 
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E Checkpoint [Res1] - Test Results 
Pile Vier Iools Help 
méveouaaae-2? 
b Test Checkpoint Summary 
EB sacris Data Text Checkpoint "New York": 
Ew Checkpoint Iteration 1 (Row 1) Passed 
Bl StartUp Browser 
EÔ Action Smmary Date and Time: 2006-5-19- 13:52:20 
Ë Z telcone: Mercury Tours 
H- dA Yelcome: Mercury Tours _ 
B- dÀ Fina a Flight: Mercury Details 


W dusaete nie krri coe hackpointceptursd"NSMWIYGIKI"betwesii 
-VE Book a Flight: Mercury Departing and to San Francisco 
E 243 Flight Confirmation: Merci Match case: OFF 
VM Checkpoint “New York” Exact match: OFF 
@ home- Smart Identifi 
B “oas” Click 
m. NA elcome: Mercury Tours_2 


Your itinerary has been booked! 


Please print a copy ofthis screen for your record 
Mercury Tours. 


Flight Confirmation # 2006-05-18105502 


Departing 

New York to San Francisco 

5/18/2006 @ 5:03 wi Blue Skies Airlines 360 
Business 

$270 each 


For Help, press FI 


图 8-24 验证 文字 检查 点 


8.1.4 参数 化 


在 测试 应 用 程序 时 ,可 能 想 检 查 对 应 用 程序 使 用 不 同 输入 数据 进行 同一 操作 时 ,程序 是 
和 否 能 正常 地 工作 。 在 这 种 情况 下 ,可 以 将 这 个 操作 重复 录制 多 次 ,每 次 输入 不 同 的 数据 ,这 
种 方法 虽然 能 够 解决 问题 ,但 实现 起 来 太 笨拙 了 。QuickTest 提供 了 一 个 更 好 的 方法 来 解 
决 这 个 问题 一 一 参数 化 测试 脚本 。 参 数 化 测试 脚本 包括 数据 输入 的 参数 化 和 检测 点 的 参 
数 化 。 

使 用 QuickTest 可 以 通过 将 固定 值 蔡 换 为 参数 ,扩展 基本 测试 或 组 件 的 范围 。 该 过 程 
( 称 为 参数 化 ) 大 大 提高 了 测试 或 组 件 的 功能 和 灵活 性 。 

可 在 QuickTest 中 使 用 参数 功能 ,通过 参数 化 测试 或 组 件 所 使 用 的 值 来 增强 测试 或 组 
件 。 参 数 是 一 种 从 外 部 数据 源 或 生成 器 赋值 的 变量 。 

QuickTest 可 以 参数 化 测试 或 组 件 中 的 步骤 和 检查 点 中 的 值 ,还 可 以 参数 化 操作 参数 
的 值 。 如 果 和 希望 参数 化 测试 或 组 件 中 多 个 步骤 中 的 同一 个 值 , 可 能 需要 考虑 使 用 数据 驱动 
器 ,而 不 是 手动 添加 参数 。 


1. 参数 化 步骤 和 检查 点 中 的 值 


录制 或 编辑 测试 或 组 件 时 ,可 以 参数 化 步骤 和 检查 点 中 的 值 , 可 以 参数 化 选 定 步骤 的 对 
象 属性 的 值 ,还 可 以 参数 化 为 该 步骤 定义 的 操作 (方法 或 函数 参数 ) 的 值 。 
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例如 ,应 用 程序 或 网 站 可 能 包含 一 个 带 有 编辑 字段 的 表单 ,用 户 可 以 在 该 编辑 字段 中 输 
入 用 户 名 。 测 试 者 可 能 希望 测试 应 用 程序 或 网 站 是 否 读 取 该 信息 并 将 其 正确 显示 在 对 话 框 
中 。 可 以 插入 一 个 对 已 登录 的 用 户 名 使 用 内 置 环 境 变 量 的 文本 检查 点 ,以 检查 显示 的 信息 
是 否 正 确 。 

通过 参数 化 检查 点 属性 的 值 ,可 以 检查 应 用 程序 或 网 站 如 何 基于 不 同 的 数据 执行 相同 
的 操作 o 

例如 ,如果 要 测试 Mercury Tours 示例 网 站 ,可 以 创建 一 个 检查 点 ,以便 检查 预订 机 票 
后 该 机 票 是 否 被 正确 预订 。 假 设 需要 检查 针对 各 种 不 同 目的 地 所 预订 的 航班 是 否 正确 ,可 
以 为 目的 地 信息 添加 一 个 数据 表 参 数 ,而 不 是 为 每 个 目的 地 分 别 创建 带 有 单独 检查 点 的 不 
同 测试 或 组 件 。 对 于 测试 或 组 件 的 每 次 循环 ,QuickTest 都 会 针对 不 同 目的 地 检查 航班 
信息 。 

1) 参数 化 对 象 和 检查 点 的 属性 值 

可 以 在 “对 象 属性 ?或 “对 象 库 ?对 话 框 中 参数 化 对 象 的 一 个 或 多 个 属性 的 值 。 可 以 在 
“检查 点 属性 ”对 话 框 中 参数 化 检查 点 的 一 个 或 多 个 属性 的 值 。 

采用 下 列 方式 可 以 打开 “对 象 属性 ”对 话 框 或 “检查 点 属性 ”对 话 框 。 

CD 选择 “步骤 "对象 属性 ”, 或 者 右键 单 击 某 个 步骤 并 选择 “对 象 属性 选项。 将 打 
开 * 对 象 属性 ?对 话 框 。 

(2) 选择 “工具 ?对象 库 ”, 单 击 “ 对 象 库 ? 工 具 栏 按钮 ,或 者 右键 单 击 包 含 该 对 象 的 操 
作 或 组 件 , 然 后 选择 "对象 库 ”选项 。 将 打开 “对 象 库 "对话 框 。 

(3) AR PR dg UR TET RAHE cessas 
击 该 检查 点 并 选择 “检查 点 属性 "选项 。 然 后 在 对 Cue [ur (gel 
话 框 的 “配置 值 "区 域 中 选择 参数 ,如 图 8-25 所 示 。 | 6 Pes 

如 果 该 值 已 经 参数 化 , 则 Parameter 框 中 将 显 s PoS amme etone aaea f| 
示 该 值 的 当前 参数 定义 。 如 果 该 值 尚未 参数 化 ， 

Jl] Parameter 框 中 将 显示 该 值 的 默认 参数 定义 。 图 8-25 “配置 值 "区 域 

2) 参数 化 操作 的 值 

如 果 步 又 中 使 用 的 方法 或 函数 具有 参数 , 则 可 以 根据 需要 参数 化 该 参数 值 。 例 如 ,如 果 
操作 使 用 Click 方法 , 则 可 以 参数 化 x 参数 y 参数 或 这 两 者 的 值 。 

在 关键 字 视图 中 选择 已 参数 化 的 值 时 .将 显示 该 参数 类 型 的 图 标 。 例 如 ,在 图 8-26 的 
片段 中 ,已 将 Set 方法 的 值 定义 为 随机 数字 参数 。 每 次 运行 测试 或 组 件 时 ,QuickTest 都 会 
在 creditnumber 编辑 框 中 输入 一 个 随机 数字 值 。 

S passes se Tm Enter T n the "passFast0" edit box. l 


LIE passLas0 lse "gh" Enter "gh in the "passLastlr edi box. | 


图 8-26 参数 化 操作 的 值 


可 以 使 用 视图 中 的 “ 值 ” 副 列 中 的 参数 化 图 标 来 参数 化 操作 值 。 

单 击 参数 化 图 标 王 .打开 * 值 配置 选项 "对话 框 ,将 显示 当前 定义 的 值 , 如 图 8-27 
所 示 。 

选择 “参数 "。 如 果 该 值 已 经 参数 化 , 则 “参数 ”部 分 将 显示 该 值 的 当前 参数 定义 。 如 果 
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图 8-27 “ 值 配置 选项 "对话 框 


该 值 尚未 参数 化 , 则 “参数 ”部 分 将 显示 该 值 的 默认 参数 定义 。 单 击 OK 按钮 接受 显示 的 参 
数 语句 并 关闭 该 对 话 框 。 

选择 一 个 尚未 参数 化 的 值 时 ，QuickTest 会 为 该 值 生成 默认 参数 定义 。 表 8-4 描述 了 
如 何 确定 默认 参数 设置 。 


表 8-4 ”确定 默认 参数 设置 


执行 参数 化 时 条 件 默认 参数 类 型 默认 参数 名 
操作 中 的 步骤 或 检 | 至 少 在 当前 操作 中 定义 了 一 操作 参数 在 “操作 属性 ”对 话 框 的 “参数 ”选项 卡 
查 点 的 值 个 输入 操作 参数 中 显示 第 一 个 输入 参数 
EEES PR fE H i A PR | 至 少 为 调用 该 嵌 套 操作 的 操 操作 参数 在 调用 操作 的 “操作 属性 ”对 话 框 的 
作 参 数值 作 定 义 了 一 个 输入 操作 参数 “参数 "选项 卡 中 显示 第 一 个 输入 参数 
顶层 操作 调用 的 输 | 至 少 为 测试 定义 了 一 个 输入 测试 参数 在 “测试 设置 ”对话 框 的 “参数 ”选项 卡 
和 人 操作 参数 值 参数 中 显示 第 一 个 输入 参数 
组 件 中 的 步骤 或 检 | 至 少 为 该 组 件 定义 了 一 个 输 组 件 参 数 在 “业务 组 件 设置 "对 话 框 的 “参数 ” 选 
查 点 的 值 人 参数 项 卡 中 显示 第 一 个 输入 参数 


如 果 上 述 相关 条 件 不 为 真 , 则 默认 参数 类 型 为 "数据 表 ”。 如 果 接受 了 默认 参数 详细 信 
息 ，QuickTest 将 用 基于 选 定 值 的 名 称 新 建 一 个 数据 表 参 数 。 


2. 参数 种 类 


QuickTest 有 以 下 4 种 类 型 的 参数 。 

CD 测试 ,操作 或 组 件 参数 ,通过 它 可 以 使 用 从 测试 或 组 件 中 传递 的 值 ,或 者 来 自 测试 
中 的 其 他 操作 的 值 。 为 了 在 特定 操作 内 使 用 某 个 值 ,必须 将 该 值 通过 测试 的 操作 层次 结构 
向 下 传递 到 所 需 的 操作 。 然 后 ,可 以 使 用 该 参数 值 来 参数 化 测试 或 组 件 中 的 步骤 。 例 如 , 假 
设 要 使 用 从 运行 (调用 ?测试 的 外 部 应 用 程序 传递 到 测试 中 的 某 个 值 来 参数 化 Action3 中 的 
一 个 步骤 。 可 将 该 值 从 测试 级 别传 递 到 Action1 (顶层 操作 ) 至 Action3 CActionl 的 子 操 
作 ) ,然后 使 用 该 操作 输入 参数 值 (从 外 部 应 用 程序 传递 的 值 ) 来 参数 化 所 需 的 步骤 。 
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(2) 数据 表 参 数 ,通过 它 可 以 创建 使 用 测试 者 所 提供 的 数据 多 次 运行 的 数据 驱动 的 测 
试 (或 操作 ) 。 在 每 次 重复 (或 循环 ) 中 ,QuickTest 均 使 用 数据 表 中 不 同 的 值 。 例 如 ,假设 
应 用 程序 或 网 站 包含 一 项 功能 ,用 户 可 以 通过 该 功能 从 成 员 数 据 库 中 搜索 联系 信息 。 当 用 
户 输入 某 个 成 员 的 姓名 时 ,将 显示 该 成 员 的 联系 信息 ,以 及 一 个 标记 为 “查看 二 MemName> 的 
照片 ”的 按钮 ,其 中 ,一 MemName 二 是 该 成 员 的 姓名 。 可 以 参数 化 按钮 的 名 称 属性 ,以 便 在 
运行 会 话 的 每 次 循环 期 间 ,QuickTest 可 标识 不 同 的 照片 按钮 。 

(3) 环境 变量 参数 ,通过 它 可 以 在 运行 会 话 期 间 使 用 来 自 其 他 来 源 的 变量 值 。 这 些 变 
量 值 可 能 是 测试 者 所 提供 的 值 ,或 者 是 Quick Test 基于 测试 者 选择 的 条 件 和 选项 而 生成 的 
值 。 例 如 ,可 以 让 QuickTest 从 某 个 外 部 文件 读 取 用 于 填写 Web 表单 的 所 有 值 ,或 者 可 以 
使 用 QuickTest 的 内 置 环境 变量 之 一 来 插入 有 关 运 行 测试 或 组 件 的 计算 机 的 当前 信息 。 

(4) 随机 数字 参数 ,通过 它 可 以 插入 随机 数字 作为 测试 或 组 件 的 值 。 例 如 ,要 检查 应 用 
程序 处 理 大 小 机 票 订单 的 方式 ,可 以 让 QuickTest 生成 一 个 随机 数字 ,然后 将 其 插入 到 * 票 
数 "编辑 字段 中 。 

1) 使 用 数据 表 参 数 

可 以 通过 创建 数据 表 参 数 来 为 参数 提供 可 能 的 值 列表 。 通 过 数据 表 参 数 可 以 创建 测试 
者 所 提供 的 数据 多 次 运行 的 数据 驱动 测试 .组 件 或 操作 。 在 每 次 重复 中 ,QuickTest 均 使 用 
数据 表 中 不 同 的 值 。 

例如 ,考虑 Mercury Tours 示例 网 站 ,通过 该 网 站 可 预订 航班 请 求 。 要 预订 航班 ,需要 提 
供 航 班 路 线 , 然 后 单 击 “ 继 续 ” 按 钮 。 如 图 8-28 所 示 该 网 站 将 针对 请 求 的 路 线 返 回 可 用 的 航班 。 


A New vork 


图 8-28 针对 一 条 路 线 来 检查 可 用 航班 


可 通过 访问 网 站 并 录制 大 量 查询 的 提交 来 执行 该 测试 。 这 是 一 个 既 费 时 又 费力 的 低 效 
解决 方案 。 通 过 使 用 数据 表 参 数 ,可 以 连续 对 多 个 查询 运行 测试 或 组 件 。 

参数 化 测试 或 组 件 时 ,需要 首先 录制 访问 网 站 并 针对 所 请 求 的 一 条 路 线 来 检查 可 用 航 
班 的 步骤 。 然 后 将 录制 的 路 线 蔡 换 为 某 个 数据 表 参 数 , 并 在 数据 表 的 全 局 表 中 添加 自己 的 
数据 集 , 每 条 路 线 一 个 。 

新 建 数据 表 参 数 时 ,将 在 数据 表 中 添加 新 的 一 列 ,并 将 参数 化 的 当前 值 放 在 第 一 行 中 。 
如 果 要 对 值 进行 参数 化 并 选择 现 有 的 数据 表 参 数 , 则 将 保留 所 选 参数 的 列 中 的 值 ,并 且 这 些 
值 不 会 被 参数 的 当前 值 覆盖 。 

如 图 8-29 所 示 , 表 中 的 每 个 列 都 表示 单个 数据 表 参 数 的 值 列 表 。 列 标题 是 参数 名 。 表 
中 的 每 一 行 都 表示 QuickTest 在 测试 或 组 件 的 单 次 循环 期 间 为 所 有 参数 提交 的 一 组 值 。 运 
行 测试 或 组 件 时 , QuickTest 将 针对 表 中 的 每 一 行 数据 运行 一 次 测试 或 组 件 循环 。 例 如 ， 
如 果 测 试 在 数据 表 的 全 局 表 中 有 10 行 , 则 运行 10 次 循环 。 


184 


iN 


实用 软件 测试 


图 8-29 测试 循环 举例 


在 上 面 的 例子 中 , 当 运 行 测试 时 ,QuickTest 将 为 每 一 个 路 线 分 别提 交 一 个 查询 。 

2) 使 用 环境 变量 参数 

QuickTest 可 以 插入 环境 变量 列表 中 的 值 ,该 列表 是 可 通过 测试 访问 的 变量 和 相应 值 
的 列表 。 在 测试 运行 的 整个 过 程 中 ,无论 循环 次 数 是 多 少 ,环境 变量 的 值 始 终 保 持 不 变 , 除 
非 在 脚本 中 以 编程 方式 更 改变 量 的 值 。 

QuickTest 有 以 下 三 种 环境 变量 : 用 户 定义 的 内 部 环境 变量 ,用户 定义 的 外 部 环境 变 
量 以 及 内 置 环境 变量 。 

用 户 定义 的 内 部 环境 变量 一 一 在 测试 内 定义 的 变量 。 这 些 变量 与 测试 一 起 保存 ,并 且 
只 能 在 定义 这 些 变量 的 测试 内 访问 。 在 “测试 设置 ”对 话 框 或 “参数 选项 ”对 话 框 的 “环境 ” 选 
项 卡 中 ,可 以 创建 或 修改 测试 中 用 户 定义 的 内 部 环境 变量 。 

用 户 定 义 的 外 部 环境 变量 一 一 在 活动 外 部 环境 变量 
文件 中 预定 义 的 变量 。 可 根据 需要 创建 任意 多 的 文件 ,并 
为 每 个 测试 选择 一 个 适当 的 文件 ,或 者 更 改 用 于 每 个 测试 
运行 的 文件 。 

内 置 环 境 变 量 表示 有 关 测 试 和 运行 测试 的 计算 机 
的 信息 的 变量 ,例如 测试 路 径 和 操作 系统 。 从 所 有 测试 和 组 
件 中 都 可 以 访问 这 些 变量 ,并 且 它 们 都 被 指定 为 只 读 变量 。 

3) 使 用 随机 数字 参数 

当选 择 * 随 机 数字 ”作为 参数 类 型 时 ,可 以 通过 “参数 
选项 ”对 话 框 将 参数 配置 为 使 用 随机 数字 。“ 值 配置 选项 ” 
对 话 框 的 “参数 ”部 分 与 “参数 选项 ”对 话 框 非常 相似 ,如 
图 8-30 所 示 。 图 8-30 “参数 选项 "对 话 框 
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数字 范围 一 一 指定 用 于 生成 随机 数字 的 范围 。 默 认 情况 下 ,随机 数字 范围 介 于 0 一 100 之 
间 。 可 通过 在 “从 ”和 “到 ” 框 中 输入 不 同 的 值 来 修改 此 范围 。 该 范围 必须 介 于 0~2 147 483 647 
(包含 ) 之 间 。 

名 称 一 一 指定 参数 的 名 称 。 通 过 为 随机 参数 指定 名 称 可 以 在 测试 中 多 次 使 用 同一 个 参 
数 。 可 以 选择 现 有 的 命名 参数 ,或 者 通过 输入 新 的 描述 性 名 称 来 新 建 命名 参数 。 

生成 新 随机 数字 一 一 定义 命名 随机 参数 的 生成 计时 。 选 中 “名 称 ” 复 选 框 时 会 启用 该 
框 。 可 以 选择 下 列 选项 之 一 。 

(1) 为 每 次 操作 循环 : 在 每 次 操作 循环 结束 时 生成 一 个 新 数字 。 

(2) 为 每 次 测试 循环 : 在 每 次 全 局 循环 结束 时 生成 一 个 新 数字 。 

(3) 为 整个 测试 运行 生成 一 次 : 第 一 次 使 用 参数 时 生成 一 个 新 数字 。 在 整个 测试 运行 
中 ,对 参数 使 用 同一 个 数字 。 


3. 参数 化 测试 脚本 


1) 定义 参数 

前 面 学 习 了 参数 的 种 类 以 及 参数 化 步骤 和 检查 点 中 的 值 , 现 在 使 用 Checkpoint 脚本 ， 
在 测试 脚本 中 ,New York 是 个 常数 值 ,也 就 是 说 ,每 次 执行 测试 脚本 预订 机 票 时 ,出 发 地 点 
都 在 New York。 现 在 ,将 测试 脚本 中 的 出 发 地 点 参数 化 ,这 样 ,执行 测试 脚本 时 就 会 以 不 
同 的 出 发 地 点 去 预订 机 票 了 。 

(1) 打开 Checkpoint 测试 脚本 ,将 脚本 另存 为 Parameter, 然 后 选择 要 参数 化 的 文字 : 
在 视图 树 中 展开 Actionl Welcome: Mercury Tours>Find a Flight: Mercury, 

(2) 在 视图 树 中 选择 fromPort 右边 的 Value 字段 ,然后 再 单 击 参数 化 图 标 到 ,开启 
Value Configuration Options 对 话 框 ,如 图 8-31 所 示 。 

(3) 设置 要 参数 化 的 属性 ,选择 Parameter 选项 ,如 图 8-32 所 示 ,这样 就 可 以 用 参数 值 
来 取代 “New York” 这 个 常数 。 在 参数 中 选择 DataTable 选项 ,这 样 这 个 参数 就 可 以 从 
QuickTest 的 Data Table 中 取得 ,将 参数 的 名 字 改 为 “departure”。 


me | 


图 8-31 Value Configuration Options 对 话 框 图 8-32 设置 要 参数 化 的 属性 
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COD 单 击 OK 按钮 确认 ,QuickTest 会 在 DataTable 中 新 增 departure 参数 字段 ,并 且 搬 
和 一行 New York 的 值 , “New York” 会 成 为 测试 脚本 执行 使 用 的 第 一 个 值 , 如 图 8-33 
所 示 。 


Josual[əmlm| > a s eet] 
Qnod eR mss | @# Ə) | 6 t |b QJ G |a |ú ss, a @ 
ltem Operation | Value [Documentation a] 
v @ Actionl 
n fŠ Welcome: Mercury Tours 
b SA Welcome: Mercury Tours 
v FÀ Find a Fight Mercury 


SI tcPort Select "San Francisco" Select the "San Francisco" item in the "toPort" list 
| | uba Select (rae Select the "20" tem in the "toDay’” ist. 
- 9 servClass Select "Business" Select radio button "Business" in the "servClace" radio buto z | 
» 


Passengers: [1 z] 


图 8-33 ”新 增 departure 参数 字段 


参数 化 以 后 可 以 看 到 树 视图 中 的 变化 ,在 参数 之 前 ,这 个 测试 步骤 显示 ”fromPort …Select… 
New York”, 现 在 ,这 个 步骤 变 成 了 “fromPort …Select… Data Table ("departure" ,dtGlobalSheet)”。 
而 且 当 单 击 Value 字段 时 , Value 字段 会 显示 为 团丁 .表示 此 测 
试 步骤 已 经 被 参数 化 ,而 且 其 值 从 DataTable 中 的 departure 字段 中 获得 。 

(5) 在 departure 字段 中 加 入 出 发 点 资料 ,使 QuickTest 可 以 使 用 这 些 资料 执行 脚本 。 

在 departure 字段 的 第 二 行 、 第 三 行 分 别 输入 : Portland, Seattle, 

(6) 保存 测试 脚本 。 

2) 修正 受到 参数 化 影响 的 步骤 

当 测试 步骤 被 参数 化 以 后 ,有 可 能 会 影响 到 其 他 的 测试 步骤 也 要 参数 化 。 例 如 ,为 了 验 
证 在 Flight Confirmation 网 页 中 是 否 出 现 “New York”, 在 网 页 上 添加 了 一 个 文字 检查 点 。 
那么 ,就 要 对 出 发 地 的 文字 检查 点 做 参数 化 ,以 符合 对 出 发 地 点 参数 化 的 预期 结果 。 

修正 文字 检查 点 ,首先 在 树 视图 中 ,展开 Actionl Welcome: Mercury Tours—Flight 
Confirmation: Mercury 页 面 ,然后 单 击 鼠 标 右键 ,选择 Checkpoint Properties 选项 ,打开 
Text Checkpoint Properties 对 话 框 ,如 图 8-34 所 示 。 

在 Checked Text 的 Constant 字段 中 显示 为 “New York”, 表 示 测 试 脚本 在 每 次 执行 
时 ,这 个 文字 检查 点 的 预期 值 都 为 “New York”。 选 择 Parameter, 单 击 旁 边 的 Parameter 
Options 按钮 国 ,打开 Parameter Options 对 话 框 ,如 图 8-35 所 示 。 

在 参数 类 型 选择 框 中 选择 Data Table 选项 ,在 名 字 选 择 框 中 选择 departure 选项 ,指明 
这 个 文字 检查 点 使 用 departure 字段 中 的 值 当 成 检查 点 的 预期 值 。 
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8-34 Text Checkpoint Properties 对 话 框 图 8-35 Parameter Options 对 话 框 


单 击 OK 按钮 关闭 对 话 框 ,这 样 文字 检查 点 也 被 参数 化 了 。 

3) 执行 并 分 析 使 用 参数 的 测试 脚本 

参数 化 测试 脚本 后 ,运行 Parameter 测试 脚本 。QuickTest 会 使 用 DataTable 中 的 
departure 字段 值 ,执行 三 次 测试 脚本 。 

执行 测试 脚本 : 单 击 工具 栏 上 的 Run 按钮 ,开启 Run 对 话 框 ,选取 New run results folder, 
其 余 为 默认 值 , 单 击 OK 按钮 开始 执行 脚本 。 当 脚本 运行 结束 后 ,会 开启 测试 结果 窗口 。 

在 树 视图 中 ,展开 Parameter Iteration2— Actionl Summary— Welcome Mercury Tours > 
Flight Confirmation: Mercury ,选择 Checkpoint" New York". i Wn El 8-36 所 示 。 


Text Checkpoint "New York": Passed 
BE-v Dp Parameter Auasssssumasaiyasasaiasasniasasnsssaamannaasuamimamasanansamaaainasnamasuanasnsasiqaq 


vB Action! Summary Date and Time: 2006-5-24- 9:44:07 
E- X Parameter Iteration 2 (Row 2) 
- Actionl Summi 
m x@ Acti ary Details 

Text Checkpoint captured *Portland * between Departing end 
to San Francisco 
Match case: OFF 
Exactmetch: OFF 
Ignore spaces: ON 


|o Bbestiaiae 

P ao Merry Your itinerary has been booked! 

EE pc Please print a copy ofthis screen for your records. Thai | 
m- X Paraneter Iteration 3 (ow 3) Mercury Tours. 


Portland to San Francisco 
5/23/2006 @ 5:03 wi Blue Skies Airlines 560 
Coach 


图 8-36 ”执行 测试 脚本 
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在 检查 点 Details 窗口 中 ,显示 Portland 为 预期 记录 同时 也 是 实际 的 值 ,所 以 文字 检查 
点 为 通过 。 同 时 也 可 以 看 到 在 下 方 的 Application 窗口 中 ,显示 机 票 的 出 发 地 点 也 是 
Portland, 

在 图 8-36 中 可 以 看 出 ,虽然 每 次 执行 时 ,文字 检查 点 的 结果 是 通过 的 ,但 是 第 二 次 与 第 
三 次 的 执行 结果 仍然 为 失败 。 这 是 因为 出 发 地 点 的 改变 ,造成 在 表格 检查 点 中 的 机 票 价钱 
改变 ,导致 表格 检查 点 失败 。 在 以 后 的 课程 中 ,将 学 习 修 正 表 格 检查 点 ,让 QuickTest 自动 
更 新 表格 检查 点 的 预期 结果 ,就 可 以 检查 正确 的 票 价 了 。 


8.1.5 输出 值 


通过 QuickTest 可 以 检索 测试 或 组 件 中 的 值 ,并 将 这 些 值 作为 输出 值 存储 。 此 后 ,就 可 
以 检索 这 些 值 ,并 在 运行 会 话 的 不 同 阶段 使 用 该 值 作为 输入 。 

输出 值 是 一 个 步骤 ,在 该 步骤 中 ,捕获 测试 或 组 件 中 某 个 特定 点 的 一 个 或 多 个 值 , 并 在 
运行 会 话 持续 时 间 存 储 这 些 值 。 随 后 ,在 运行 会 话 中 的 不 同 点 ,可 以 将 这 些 值 作为 输入 
使 用 。 

可 以 输出 任何 对 象 的 属性 值 。 还 可 以 从 文本 字符 串 、 表 单元 格 、 数 据 库 和 XML 文档 输 
出 值 。 

创建 输出 值 步骤 时 ,可 以 确定 运行 会 话 持续 时 间 内 的 值 存 储 在 哪里 ,以 及 如 何 使 用 这 些 
值 。 运 行 会 话 期 间 ,QuickTest 检索 指定 点 的 每 个 值 并 将 其 存储 在 指定 位 置 。 以 后 当 运行 
会 话 中 需要 的 值 时 ,QuickTest 将 从 该 位 置 检 索 值 并 根据 需要 来 使 用 。 


1. 创建 输出 值 


1) 输出 值 类 型 

将 输出 值 步骤 添加 到 测试 或 组 件 时 ,首先 选择 要 输出 的 值 的 类 别 , 例 如 ,属性 值 . 文 本 值 
或 XML 元 素 值 。 然 后 ,就 可 以 确定 要 输出 的 值 以 及 每 个 值 的 存储 位 置 。 在 QuickTest 中 
可 以 创建 以 下 几 个 类 别 的 输出 值 。 

(1) 标准 输出 值 

可 以 使 用 标准 输出 值 来 输出 大 多 数 对 象 的 属性 值 。 例 如 ,在 基于 Web 的 应 用 程序 中 ， 
一 个 网 页 中 的 链接 数 可 能 基于 用 户 在 上 一 页 的 表单 中 所 做 选择 的 不 同 而 变化 。 可 以 在 测试 
中 创建 一 个 输出 值 ,来 存储 页 面 中 的 链接 数 ,还 可 以 使 用 标准 输出 值 来 输出 表单 元 格 的 
内 容 。 

(2) 文本 和 文本 区 输出 值 

可 以 使 用 文本 输出 值 来 输出 屏幕 或 网 页 中 显示 的 文本 字符 串 。 创 建文 本 输出 值 时 ,可 
以 输出 对 象 文本 的 一 部 分 ,还 可 以 指定 要 在 输出 文本 之 前 和 之 后 输出 的 文本 。 

可 以 使 用 文本 区 域 输出 值 来 输出 Windows Applications 中 屏幕 已 定义 区 域内 显示 的 
文本 字符 串 。 例 如 ,假设 在 测试 的 应 用 程序 中 , 想 要 存储 显示 在 特定 步骤 之 后 的 任何 错误 消 
息 的 文本 。 在 话语 句 中 ,查看 带 有 已 知 标 题 栏 值 (例如 Error) 的 窗口 是 否 存在 。 如 果 该 窗 
口 存在 , 则 输出 该 窗口 中 的 文本 (假设 窗口 大 小 与 所 有 可 能 的 错误 消息 的 大 小 相同 )。 

在 使 用 基于 Windows 的 应 用 程序 文本 输出 值 时 应 注意 以 下 事项 。 

(D 在 基于 Windows 的 应 用 程序 中 创建 文本 或 文本 区 输出 值 时 使 用 文本 识别 机 制 ,有 
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时 会 检索 到 不 想 要 的 文本 信息 (例如 隐藏 文本 和 带 阴 影 的 文本 ,这 些 文本 会 作为 同一 字符 串 
的 多 个 副本 显示 ) 。 

© 此 外 ,在 不 同 的 运行 会 话 中 ,文本 (和 文本 区 ) 输 出 值 的 表现 方式 可 能 不 同 ,具体 取决 
于 使 用 的 操作 系统 版 本 .已 经 安装 的 Service Pack、 安 装 的 其 他 工具 包 、 应 用 程序 中 使 用 的 
API 等 。 

(3) 数据 库 输 出 值 

可 以 使 用 数据 库 输出 值 ,基于 在 数据 库 上 定义 的 查询 的 结果 (结果 集 ) 来 输出 数据 库 单 
元 格 内 容 的 值 。 可 以 从 结果 集 的 全 部 内 容 中 创建 输出 值 ,也 可 以 从 其 中 某 一 部 分 创建 输出 
值 。 在 运行 会 话 过 程 中 , QuickTest 从 数据 库 中 检索 当前 数据 ,并 根据 指定 的 设置 来 输 
出 值 。 

(4) XML 输出 值 

可 以 使 用 XML 输出 值 输出 XML 文档 中 的 XML 元 素 和 属性 的 值 。 运 行 会 话 完成 后 ， 
可 以 在 “测试 结果 ”窗口 中 查看 XML 输出 值 的 概要 结果 。 还 可 以 通过 打开 “XML 输出 值 结 
果 ” 窗 口 来 查看 详细 结果 。 例 如 ,假设 网 页 中 的 某 个 XML 文档 包含 新 车 的 价目 表 , 可 以 通 
过 选择 要 输出 的 相应 的 XML 元 素 值 来 输出 特定 汽车 的 价格 。 

表 8-5 给 出 了 每 种 环境 支持 的 输出 值 类 型 。 

表 8-5 每 种 环境 支持 的 输出 值 类 型 


输出 值 类 别 Web 标准 Windows VB ActiveX 其 他 环境 
标准 S S S S NA 
页 (标准 ) S NA NA NA NA 
表 ( 标 准 ) S NA NA S NA 
文本 S S S S NA 
文本 区 NS S S S NA 
数据 库 NS NA NA NA SCDbTable) 
XML S NA NA NA XML 文件 
*S— XH NS- 一 不 支持 NA 一 一 不 适用 
2) 存储 输出 值 


定义 输出 值 时 ,可 以 指定 运行 会 话 期 间 在 哪里 以 及 如 何 存储 每 个 值 。 可 以 将 值 输出 到 : 
测试 ,操作 或 组 件 参数 ,运行 时 数据 表 , 环 境 变量 。 

CD 将 值 存储 在 测试 操作 或 组 件 参 数 中 

可 以 将 值 输 出 到 操作 或 组 件 参数 ,以 便 可 以 在 运行 会 话 后 面 的 部 分 中 使 用 来 自 运 行 会 
话 某 一 部 分 的 值 ,或 者 传递 回 运 行 (调用 ) 测 试 或 组 件 的 应 用 程序 。 

例如 ,假设 要 测试 一 个 购物 应 用 程序 ,该 程序 计算 采购 费用 ,并 自动 从 账户 中 扣除 采购 
金额 。 想 要 测试 在 每 次 运行 带 有 不 同 的 采购 单 的 操作 或 组 件 时 ,该 应 用 程序 是 否 能 够 正确 
地 从 账户 中 扣除 采购 金额 ,可 以 将 花费 的 总 金额 输出 到 某 个 操作 或 组 件 的 参数 值 ,然后 在 稍 
后 的 扣除 该 金额 操作 中 的 运行 会 话 部 分 使 用 该 值 。 

(2) 将 值 存储 在 运行 时 数据 表 中 

对 于 要 运行 多 次 的 由 数据 驱动 的 测试 (或 操作 ) 来 说 ,将 值 输出 到 运行 时 数据 表 的 选项 
特别 有 用 。 在 每 次 重复 或 循环 中 ,QuickTest 检索 当前 值 并 将 其 存储 在 运行 时 数据 表 的 相 
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应 的 行 中 。 

例如 ,要 测试 一 个 航班 预订 应 用 程序 ,因此 设计 了 一 个 测试 来 创建 新 预订 ,随后 查看 预 
订 详 细 信息 。 每 次 运行 测试 时 ,应 用 程序 为 新 预订 生成 一 个 唯一 的 订单 号 。 要 查看 预订 ,应 
用 程序 要 求 用 户 输入 相同 的 订单 号 。 和 运行 该 测试 之 前 ,还 不 知道 订单 号 。 

要 想 解 决 这 个 问题 ,就 要 将 在 创建 新 预订 时 生成 的 唯一 订单 号 的 值 输入 数据 表 中 。 然 
后 ,在 View Reservation 屏幕 中 ,使 用 包含 存储 值 的 列 将 输出 值 插入 订单 号 输入 字段 中 。 运 
行 测试 时 ,QuickTest 检索 站 点 为 新 预订 生成 的 唯一 订单 号 ,并 在 运行 时 数据 表 中 输入 此 输 
出 值 。 测 试 到 达 查 看 预订 所 需 的 订单 号 输入 字段 时 ,QuickTest 将 存储 在 运行 时 数据 表 中 
的 唯一 订单 号 插入 订单 号 字段 中 。 

(3) 将 值 存 储 在 环境 变量 中 

将 值 输出 到 内 部 用 户 定义 的 环境 变量 时 ,可 以 在 运行 会 话 后 面 的 阶段 使 用 该 环境 变量 
输入 参数 。 

例如 ,假设 在 测试 一 个 应 用 程序 ,该 程序 会 提示 用 户 在 “欢迎 使 用 ”页 输入 账号 ,然后 显 
示 用 户 姓名 ,就 可 以 使 用 文本 输出 值 来 捕获 显示 的 名 称 值 ,并 将 其 存储 在 环境 变量 中 。 最 
后 ,可 以 检索 环境 变量 中 的 值 以 便 在 应 用 程序 的 其 他 位 置 中 输入 用 户 的 姓名 。 


2. 输出 属性 值 


1) 定义 标准 输出 值 
通过 “输出 值 属 性 ”对 话 框 可 以 选择 要 输出 的 属性 值 ,并 定义 选择 的 每 个 值 的 设置 ,如 
图 8-37 所 示 。 


图 8-37 “输出 值 属性 "对话 框 


关闭 此 对 话 框 之 前 ,可 以 为 相同 对 象 选择 许多 属性 并 为 每 个 属性 值 定义 输出 设置 。 运 
行 会 话 过 程 中 到 达 输 出 值 步 又 时 ,QuickTest 将 检索 所 有 指定 的 属性 值 。 

D 标识 对 象 

对 话 框 的 上 部 显示 有 关 要 创建 输出 值 的 测试 对 象 的 信息 , 见 表 8-6 。 
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表 8-6 要 创建 输出 值 的 测试 对 象 的 信息 


项 目 描 述 
名 称 测试 对 象 的 名 称 
类 对 象 的 类 别 


(2) 选择 要 输出 的 属性 值 
对 话 框 的 上 半 部 分 包含 一 个 窗 格 ,其 中 列 出 选 定 对 象 的 属性 ,以 及 它们 的 值 和 类 型 。 该 
窗 格 包含 的 项 如 表 8-7 所 示 。 


表 8-7 窗 格 包含 的 项 


窗口 元 素 d E 
复 选 框 ” ”要 指定 将 输出 的 属性 ,选择 相应 的 复 选 框 ,可 以 为 对 象 选 择 多 个 属性 ,并 为 选择 的 每 个 属 
性 值 指定 输出 选项 
类 别 图 标 表 示 属性 的 值 当 前 为 常量 
8 图标 表 示 属 性 的 值 当前 存储 在 测试 .操作 或 组 件 参 数 中 
者 | 图 标 表示 属性 的 值 当前 存储 在 运行 时 数据 表 中 
六 图 标 表示 属性 的 值 当前 存储 在 环境 变量 中 
属性 属性 的 名 称 
fm 属性 的 当前 值 


(3) 指定 属性 值 的 输出 设置 


选择 属性 的 复 选 框 时 ,将 突出 显示 属性 详 
细 信 息 , 并 且 在 “配置 值 ” 区 域 中 显示 选 定 属性 
值 的 当前 输出 定义 ,如 图 8-38 所 示 。 

第 一 次 选择 要 输出 的 属性 值 时 ,“ 配 置 值 ” 
区 域 中 会 显示 值 的 默认 输出 定义 。 选 择 要 输出 
的 属性 值 时 ,可 以 : 

CD 通过 选择 其 他 属性 值 或 单 击 OK 按钮 
接受 显示 的 输出 定义 。 

© 通过 单 击 “ 修 改 " 按 钮 更 改选 定 值 的 输 
出 类 型 和 /或 设置 。 将 打开 “输出 选项 ”对 话 框 
并 显示 该 值 当 前 的 输出 类 型 和 设置 。 

2) 指定 输出 类 型 和 设置 

为 每 个 值 定 义 的 输出 类 型 和 设置 决定 该 值 


在 运行 会 话 中 的 存储 位 置 以 及 使 用 方式 。 到 达 图 8-38 “配置 值 ”区 域 
输出 值 步骤 时 ,QuickTest 检索 为 输出 选 定 的 
每 个 值 并 将 其 存储 在 指定 位 置 , 以 供 以 后 在 运行 会 话 中 使 用 。 新 建 输出 值 步骤 时 ， 
QuickTest 为 选 定 要 输出 的 每 个 值 指定 一 个 默认 定义 。 
可 以 通过 选择 不 同 的 输出 类 型 并 /或 更 改 输出 设置 来 更 改选 定 值 的 当前 输出 定义 。 
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(1) 将 值 输出 到 操作 或 组 件 参数 

可 以 将 值 输出 到 操作 或 组 件 参数 ,以 便 这 些 值 可 以 在 运行 会 话 的 后 面部 分 中 使 用 ,或 者 传 
递 回 运行 (调用 ) 测 试 或 组 件 的 外 部 应 用 程序 。 如 果 参 数 已 经 定义 为 用 于 调用 操作 或 组 件 的 输 
出 参数 ,只 能 将 值 输出 到 操作 或 组 件 参 数 。 此 外 , 仅 当 输出 值 类 型 和 参数 值 类 型 匹配 时 ,将 值 
输出 到 操作 或 组 件 的 选项 才 可 用 。 选 择 * 测 试 参数 "“ 操 作 参 数 "或 “组 件 参数 "作为 输出 类 型 
时 ,通过 “输出 选项 ”对 话 框 可 以 选择 在 其 中 存储 运行 会 话 持续 时 间 的 选 定 值 的 参数 。 

(2) 将 值 输 出 到 数据 表 

选择 “数据 表 ” 作 为 输出 类 型 时 ,通过 “输出 选项 ”对 话 框 可 以 指定 在 运行 时 数据 表 中 存 
储 选 定 值 的 位 置 ,如 图 8-39 所 示 。 

在 将 值 输出 到 数据 表 时 ,有 以 下 选项 可 以 修改 。 

D 名 称 : 指定 数据 表 中 要 存储 值 的 列 的 名 称 。QuickTest 建议 使 用 输出 的 默认 名 称 。 
可 以 从 列表 中 选择 现 有 的 输出 名 称 , 也 可 以 通过 使 用 默认 输出 名 称 或 输入 有 效 的 描述 性 名 
称 来 新 建 输出 名 称 。 

@ 数据 表 中 的 位 置 : 输出 测试 的 值 时 ,指定 将 数据 表 列 名 称 添 加 到 数据 表 的 全 局 工作 
表 还 是 当前 操作 工作 表 中 。 

(3) 将 值 输 出 到 环境 变量 

如 果 选 择 “ 环 境 ” 作 为 输出 类 型 时 ,通过 “输出 选项 ”对 话 框 ,如 图 8-40 所 示 , 可 以 指定 要 
在 其 中 存储 运行 会 话 持续 时 间 的 选 定 值 的 环境 参数 ,该 参数 由 内 部 用 户 定义 。 


图 8-39 “输出 选项 ”对 话 框 (1) 图 8-40 “输出 选项 ”对 话 框 (2) 


3. 在 脚本 中 建立 输出 值 


1) 建立 输出 值 

因为 在 表格 检查 点 中 机 票 价 钱 的 预期 结果 ,并 没有 随 着 出 发 地 点 的 改变 而 变动 ,导致 第 
二 ,第 三 次 的 执行 结果 是 失败 的 。 

现在 ,从 Select a Flight: Mercury 网 页 上 取得 机 票 价钱 ,并 且 以 取得 的 机 票 价钱 更 新 表 
格 检查 点 的 预期 结果 ,这 样 一 来 ,测试 脚本 就 可 以 利用 在 Select a Flight: Mercury 网 页 上 取 
得 的 机 票 价钱 去 验证 Book a Flight: Mercury 上 显示 的 机 票 价钱 。 


第 8 章 ” 黑 盒 测试 工具 与 白 盒 测试 工具 < m" 


CD 打开 Parameter 测试 脚本 ,将 脚本 另存 为 Output 测试 脚本 。 

(2) 在 树 视 图 中 ,展开 Welcome: Mercury Tours 并 且 单 击 Select a Flight: Mercury 网 
页 ,在 Active Screen 窗口 中 会 显示 相应 的 页 面 。 在 Active Screen 窗口 中 选取 270 ,然后 单 
击 鼠 标 右键 ,选择 Insert Text Output 选项 ,打开 Text Output Value Properties 对 话 框 , 如 
图 8-41 所 示 。 

(3) 在 Text Output Value Properties 对 话 框 中 单 击 Modify 按钮 ,打开 Output Options 
对 话 框 ,如 图 8-42 所 示 。 


Text Output Valu 


8-41 Text Output Value Properties 对 话 框 图 8-42 Output Options 对 话 框 


在 Name 字段 显示 Select_a_Flight_MercuryOutput_Text _out, 将 其 改 成 “depart_flight_ 
price" ,接受 其 他 默认 值 , 单 击 OK 按钮 确认 ,QuickTest 会 在 DataTable 中 加 入 depart | 
flight_price 字段 。 

在 DataTable 上 的 depart_flight_price 字段 的 第 一 行 会 显示 从 应 用 程序 上 取得 的 输出 
值 (270)。 在 执行 时 ,第 一 次 QuickTest 会 取得 一 样 的 值 270, 接 下 来 的 第 二 、 第 三 次 会 从 应 
用 程序 上 取得 实际 值 ,并 存放 在 Data Table 中 。 

(4) 修正 表格 检查 点 的 预期 值 。 

在 树 视图 中 , 展开 Welcome: Mercury Tours > Book a Flight; Mercury, 在 
Checkpoint" New York to San Francisco" 上 单 击 鼠 标 右键 ,选择 Checkpoint Properties j 
项 ,打开 Table Checkpoint Properties 对 话 框 。 

选中 第 三 行 .第 三 列 ( 被 勾 选 的 字段 ) ,在 Configure value 中 选择 Parameter, 然 后 单 击 
Parameter Options 按钮 ,打开 Parameter Options 对 话 框 ,如 图 8-43 所 示 。 

在 “名 字 ” 下 拉 列 表 中 选择 depart_flight_price。 

(5) 单 击 OK 按钮 回 到 Table Checkpoint Properties 对 话 框 ,如 图 8-44 所 示 , 可 以 看 到 
这 个 检查 点 的 预期 结果 已 经 被 参数 化 了 。 

单 击 OK 按钮 关闭 Table Checkpoint Properties 对 话 框 .保存 测试 脚本 。 
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2) 执行 并 分 析 使 用 输出 值 的 测试 脚本 
前 面 在 脚本 中 建立 了 输出 值 , 并 且 将 表格 检查 点 参数 化 ,现在 执行 Output 测试 脚本 。 


图 8-43 Parameter Options 对 话 框 图 8-44 Table Checkpoint Properties 对 话 框 


执行 测试 脚本 : 单 击 工具 栏 上 的 Run 按钮 ,开启 Run 对 话 框 ,选取 New run results folder, 
其 余 为 默认 值 , 单 击 OK 按钮 开始 执行 脚本 。 当 脚本 运行 结束 后 ,会 开启 测试 结果 窗口 。 

在 执行 结果 窗口 中 , 单 击 树 视图 中 的 Run-Time-Data, 如 图 8-45 所 示 ,可 以 在 表格 中 看 
到 执行 测试 时 使 用 的 输出 值 , 在 depart flight. price 字段 中 显示 了 不 同 的 机 票 价钱 。 


wp output Iteration 2 (ow 2) 


ÜB output Iteration 3 Row 3) 


8-45 ”执行 结果 窗口 
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在 结果 窗口 中 单 击 Test output Summary 可 以 看 到 ,12 个 检测 点 都 通过 了 验证 ,运行 
结果 均 为 Passed。 


6.2 白 盒 测 试 工具 


白 盒 测 试 也 称 结构 测试 或 逮 辑 驱动 测试 , 它 是 按照 程序 内 部 的 结构 测试 程序 ,通过 测试 
来 检测 产品 内 部 动作 是 否 按照 设计 规格 说 明 书 的 规定 正常 进行 ,检验 程序 中 的 每 条 通路 是 
否 都 能 按 预 定 要 求 正确 工作 。 这 一 方法 是 把 测试 对 象 看 作 一 个 打开 的 盒子 ,测试 人 员 依 据 
程序 内 部 逻辑 结构 相关 信息 ,设计 或 选择 测试 用 例 , 对 程序 所 有 人 逻辑 路 径 进 行 测 试 ,通过 在 
不 同 点 检查 程序 的 状态 ,确定 实际 的 状态 是 否 与 预期 的 状态 一 致 。 本 节 以 JUnit 为 例 , 讲 述 
如 何 使 用 JUint 对 Java 程序 进行 白 盒 测试 。 


8.2.1 JUnit 简介 


JUnit 是 一 个 Java 语言 的 单元 测试 框架 。 它 由 Kent Beck 和 Erich Gamma 建立 ,逐渐 
成 为 源 于 Kent Beck 的 sUnit 的 xUnit 家 族 中 最 为 成 功 的 一 个 。JUnit 是 在 极限 编程 和 重 
构 (Refactor) 中 被 极力 推荐 使 用 的 工具 ,因为 在 实现 自动 单元 测试 的 情况 下 可 以 大 大 提高 
开发 的 效率 ,但 是 实际 上 编写 测试 代码 也 是 需要 耗费 很 多 的 时 间 和 精力 的 。 


1. 对 于 极限 编程 而 言 


要 求 在 编写 代码 之 前 先 写 测试 ,这 样 可 以 强制 程序 员 在 写 代 码 之 前 好 好 地 思考 代码 ( 方 
法 ) 的 功能 和 好 辑 , 和 否则 编写 的 代码 会 很 不 稳定 ,那么 就 需要 同时 维护 测试 代码 和 实际 代码 ， 
这 个 工作 量 就 会 大 大 增加 。 因 此 在 极限 编程 中 ,基本 过 程 是 这 样 的 : 构思 一 编写 测试 代码 一 
编写 代码 一 测试 ,而且 编写 测试 和 编写 代码 都 是 增 量 式 的 , 写 一 点 儿 测 一 点 儿 , 在 编写 以 后 
的 代码 中 如 果 发 现 问题 可 以 较 快 地 追踪 到 问题 的 原因 , 减 小 回归 错误 的 纠 错 难度 。 


2. 对 于 重 构 而 言 


其 好 处 和 极限 编程 中 是 类 似 的 ,因为 重 构 也 是 要 求 改 一 点 儿 测 一 点 儿 ,减少 回归 错误 造 
成 的 时 间 消 耗 。 


3. 其 他 情况 


在 开发 的 时 候 使 用 JUnit 写 一 些 适当 的 测试 也 是 有 必要 的 ,因为 一 般 也 是 需要 编写 测 
试 的 代码 的 ,可 能 原来 不 是 使 用 JUnit, 如 果 使 用 JUnit, 而 且 针 对 接口 (方法 ) 编 写 测试 代码 
会 减少 以 后 的 维护 工作 。 例 如 ,以 后 对 方法 内 部 的 修改 (这 个 就 是 相当 于 重 构 的 工作 了 )。 
男 外 就 是 因为 JUnit 有 断言 功能 .如 果 测 试 结果 不 通过 会 告诉 我 们 哪个 测试 不 通过 以 及 为 
什么 ,而 如 果 是 像 以 前 的 一 般 做 法 写 一 些 测 试 代码 看 其 输出 结果 ,然后 再 由 自己 来 判断 结果 
是 否 正确 ,使 用 JUnit 的 好 处 就 是 这 个 结果 是 否 正确 的 判断 是 由 它 来 完成 的 ,我 们 只 需要 看 
看 它 告诉 我 们 结果 是 否 正 确 就 可 以 了 ,在 一 般 情况 下 会 大 大 提高 效率 。 
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8.2.2 JUnit 的 使 用 


在 编写 大 型 程序 的 时 候 , 需 要 写成 千 上 万 个 方法 或 函数 ,这 些 函 数 的 功能 可 能 很 强大 ， 
但 在 程序 中 只 用 到 该 函数 的 一 小 部 分 功能 ,并 且 经 过 调试 可 以 确定 这 一 小 部 分 功能 是 正确 
的 。 但 是 ,同时 应 该 确保 每 一 个 函数 都 完全 正确 ,因为 如 果 今 后 对 程序 进行 扩展 ,用 到 了 某 
个 函数 的 其 他 功能 ,而 这 个 功能 有 Bug', 那 绝对 是 一 件 非 常 郁闷 的 事情 。 所 以 说 ,每 编写 完 
一 个 函数 之 后 ,都 应 该 对 这 个 函数 的 方方面面 进行 测试 ,这 样 的 测试 称 为 单元 测试 。 传 统 的 
编程 方式 进行 单元 测试 是 一 件 很 麻烦 的 事情 ,要 重新 写 另外 一 个 程序 ,在 该 程序 中 调用 需要 
测试 的 方法 ,并 且 仔细 观察 运行 结果 ,看 看 是 否 有 错 。 正 因为 如 此 麻烦 ,所 以 程序 员 们 编写 
单元 测试 的 热情 不 是 很 高 。 于 是 有 一 个 牛人 推出 了 单元 测试 包 , 大 大 简化 了 进行 单元 测试 
所 要 做 的 工作 ,这 就 是 JUnit4。 本 节 简 要 介绍 一 下 在 Eclipse 3. 2 中 使 用 JUnit4 进行 单元 
测试 的 方法 。 

首先 ,我 们 来 一 个 傻瓜 式 速成 教程 ,不 要 问 为 什么 , 先 来 体验 一 下 单元 测试 的 快感 ! 

第 一 步 ,新 建 一 个 项 目 叫 JUnit_Test, 编 写 一 个 Calculator 类 ,这 是 一 个 能 够 简单 实现 
加 减 乘除 .平方 、 开 方 的 计算 器 类 ,然后 对 这 些 功 能 进行 单元 测试 。 这 个 类 并 不 是 很 完美 ,我 
们 故意 保留 了 一 些 Bug 用 于 演示 ,这 些 Bug 在 注释 中 都 有 说 明 。 该 类 代码 如 下 。 


package andycpp; 
public class Calculator ...( 
private static int result; // 静态 变量 ,用 于 存储 运行 结果 
public void add( int n) ...( 
result = result + n; 
} 
public void substract( int n) ...{ 
result = result - 1; //Bug: 正确 的 应 该 是 result = result -n 
} 
public void multiply(int n) ...{ 
} // 此 方法 尚未 写 好 
public void divide(int n) ...( 
result - result / n; 
) 
public void square(int n) ...( 
result = n * n; 
} 
public void squareRoot(int n) ...[ 


for (; ;) ; //Bug : 死 循 环 
) 
public void clear() ...( // 将 结果 清 零 
result = 0; 


) 
public int getResult() ...( 
return result; 

$ 
} 


第 二 步 , 将 JUnit4 单元 测试 包 引入 这 个 项 目 : 在 该 项 目 上 单 击 右键 ,选择 * 属 性” 选项， 
如 图 8-46 所 示 。 
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void testadd() ( 
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iculator.add(3); 
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s Dedaration | Console. 


图 8-46 将 JUnit4 单元 测试 包 引入 项 目 


在 弹出 的 属性 窗口 中 ,首先 在 左边 选择 Java Build Path, 然 后 到 右上 选择 Libraries 选 


项 卡 ,之 后 在 最 右边 单 击 Add Library… 按 钮 ,如 图 8-47 所 示 。 


Bi Properties for JUnit4_Test 


type Fiter text 


B Source | Z: 


JARS and class folders on the buid path: 
b à JRE System Library [ye1.S.0_09] 


Javadoc Location 
Profile Compliance and vi 
Project References 
Refactoring History 
Server 


Task Tags 
Validation. 


图 8-47 


“属性 ”窗口 
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然后 在 新 弹出 的 对 话 框 中 选择 JUnit4 并 单 击 “ 确 定 ” 按 钮 ,如 图 8-47 所 示 ,JUnit4 软件 


包 就 被 包含 进 这 个 项 目 了 。 
第 三 步 ， 
菜单 ,选择 New—JUnit Test Case, 如 图 8-48 所 示 。 


[ Java - Calculator. java - ObjectWeb Lomboz 


Ele Edt Source Refactor Navigate Search Project Run Window Help 
*-0-Q- B8- BF 四” IJE | H-O 
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° N, ORE System Lbrary [re [f Copy 


Cuc @Š Source Folder 
b mÀ Junt 4 
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图 8-48 生成 JUnit 测试 框架 
在 弹出 的 对 话 


1 ,进行 相应 的 选择 ,如 图 8-49 所 示 o 


W New JUnit Test Case 


JUnit Test Case 


Select the name of the new JUnit test case. You have the options to specify 
the class under test and on the next page, to select methods to be tested, 


Oren mezea te 


Source folder:  Junit4_Test/src 


Package: andycpp 


|CakculatorTest 


这 么 选择 

= 面 再 解释 

Do you want to add comments as configured n the properties of the current project? 后 面 再 解释 
C Generate comments 


Class under test: 'andycpp. Calculator 


图 8-49 在 对 话 框 中 进行 选择 


E 成 JUnit 测试 框架 : 在 Eclipse 的 Package Explorer 中 用 右键 单 击 该 类 弹出 


第 8 章 ” 黑 盒 测试 工具 与 白 盒 测试 工具 


单 击 Next 按钮 后 ,系统 会 自动 列 出 这 个 类 中 包含 的 方法 ,选择 要 进行 测试 的 方法 。 此 
例 中 仅 对 加 、 减 、 乘 、 除 4 个 方法 进行 测试 ,如 图 8-50 所 示 。 


图 New JUnit Test Case 


Test Methods 
Select methods for which test method stubs should be created. 


Available methods: 


^m. 
MO addin) 


UE y dien 
MO dvide(nt) 进行 测试 
E] square(nt) 
E] 9 squareRoot(int) 
[19 dea) 
[] 9 getResuk() 
4-[]Q objet 
D e * object 
E ef getclass0 
[] € hashcode() 
E] € equals(Object) 
m° 
4 methods selected. 


[ Create final method stubs 
[-] Create tasks for generated test methods 


[er 


图 8-50 ”对 加 \ 减 . 乘 、 除 4 个 方法 进行 测试 


之 后 系统 会 自动 生成 一 个 新 类 CalculatorTest, 里 面包 含 一 些 空 的 测试 用 例 。 只 需要 
将 这 些 测试 用 例 稍 做 修改 即 可 使 用 。 完 整 的 CalculatorTest 代码 如 下 。 


package andycpp; 
import static org. junit. Assert. * ; 
import org. junit. Before; 
import org. junit. Ignore; 
import org. junit. Test; 
public class CalculatorTest ...[ 
private static Calculator calculator - new Calculator(); 
@Before 
public void setUp() throws Exception ...{ 
calculator.clear(); 
) 
@ Test 
public void testAdd() ...( 
calculator.add(2); 
calculator.add(3); 
assertEquals(5, calculator.getResult()); 
} 
@Test 
public void testSubstract() ...( 
calculator. add(10); 
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calculator. substract(2); 
assertEquals(8, calculator.getResult()); 


} 


@Ignore("Multiply() Not yet implemented") 


@Test 


public void testMultiply() ...( 


public void testDivide() .. 


} 
@Test 


calculator. add(8); 
calculator. divide(2); 
assertEquals(4, calculator.getResult()); 


) 


第 四 步 ,运行 测试 代码 : 按照 上 述 代码 修改 完毕 后 ,在 CalculatorTest 类 上 单 


) 


选择 Run As—JUnit Test 来 运行 测试 ,如 图 8-51 所 示 。 
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图 8-51 


Alt+Enter 中 使 用 JUnit. 


运行 测试 


.class) 


Alt+Shift+X, R 


B 
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运行 结果 如 图 8-52 所 示 。 


IB. Java - CalculatorTest.java - ObjectWeb Lomboz 
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8-52 ”运行 结果 


进度 条 是 红颜 色 表示 发 现 错误 ,具体 的 测试 结果 在 进度 条 上 面 有 表示 * 共 进行 了 4 个 测 


试 ,其 中 一 个 测试 被 忽略 ,一 个 测试 失败 ”。 


至 此 ,已 经 完整 体验 了 在 Eclipse 中 使 用 JUnit 的 方法 。 在 运用 中 ,使 用 以 下 几 个 步骤 。 
1. 包含 必要 的 Package 
在 测试 类 中 用 到 了 JUnit4 框架 ,自然 要 把 相应 的 Package 包含 进来 。 最 主要 的 一 个 


Package 就 是 org. junit. * 。 把 它 包 含 进 来 之 后 , 绝 大 部 分 功能 就 有 了 。 还 有 一 句 话 也 非常 


E 


E "import static org. junit, Assert. * 3” 在 测试 的 时 候 使 用 的 一 系列 assertEquals 方法 


就 来 自 这 个 包 。 注 意 , 这 是 一 个 静态 包含 (static) ,是 JDK5 中 新 增添 的 一 个 功能 。 也 就 是 
说 , assertEquals 是 Assert 类 中 的 一 系列 的 静态 方法 ,一 般 的 使 用 方式 是 Assert. 


a: 


ssertEquals() ,但 是 使 用 了 静态 包含 后 ,前 面 的 类 名 就 可 以 省 略 了 ,使 用 起 来 更 加 方便 。 
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2. 测试 类 的 声明 


注意 ,我 们 的 测试 类 是 一 个 独立 的 类 ,没有 任何 父 类 。 测 试 类 的 名 字 也 可 以 任意 命名 ， 
没有 任何 局 限 性 。 所 以 不 能 通过 类 的 声明 来 判断 它 是 不 是 一 个 测试 类 , 它 与 普通 类 的 区 别 
在 于 它 内 部 的 方法 的 声明 ,下 面 会 讲 到 。 


3. 创建 一 个 待 测试 的 对 象 

要 测试 哪个 类 ,那么 首先 就 要 创建 一 个 该 类 的 对 象 。 正 如 前 文中 的 代码 : 
private static Calculator calculator = new Calculator(); 

为 了 测试 Calculator 类 ,必须 创建 一 个 calculator 对 象 。 

4. 测试 方法 的 声明 


在 测试 类 中 ,并 不 是 每 一 个 方法 都 是 用 于 测试 的 ,必须 使 用 “标注 ”来 明确 表明 哪些 是 测 
试 方法 。“ 标 注 ” 也 是 JDK5 的 一 个 新 特性 ,用 在 此 处 非常 恰当 。 可 以 看 到 ,在 某 些 方法 的 前 
ifij £j €) Before, € Test, (9 Ignore 等 字样 ,这 些 就 是 标注 ,以 一 个 “@” 作 为 开头 。 这 些 标注 都 
是 JUnit4 自 定义 的 ,熟练 掌握 这 些 标注 的 含义 非常 重要 。 


5. 编写 一 个 简单 的 测试 方法 


首先 ,要 在 方法 的 前 面 使 用 @Test 标注 ,以 表明 这 是 一 个 测试 方法 。 对 于 方法 的 声明 
也 有 如 下 要 求 : 名 字 可 以 随便 取 , 没 有 任何 限制 ,但 是 返回 值 必须 为 void, 而 且 不 能 有 任何 
参数 。 如 果 违 反 这些 规 定 , 会 在 运行 时 抛 出 一 个 异常 。 至 于 方法 内 该 写 些 什么 , 那 就 要 看 需 
要 测试 些 什么 了 。 例 如 

@Test 

public void testAdd() ...( 

calculator.add(2); 

calculator.add(3); 


assertEquals(5, calculator.getResult()); 
} 


如 果 想 测试 一 下 “加 法 ”功能 是 否 正确 ,就 在 测试 方法 中 调用 几 次 add 函数 ,初始 值 为 
0, 先 加 2, 再 加 3, 期 待 的 结果 应 该 是 5。 如 果 最 终 实际 结果 也 是 5, 则 说 明 add 方法 是 正确 
的 ,反之 说 明 它 是 错 的 。assertEquals(5，calculator. getResult()); 就 是 来 判断 期 待 结果 和 
实际 结果 是 否 相 等 ,第 一 个 参数 填写 期 待 结果 ,第 二 个 参数 填写 实际 结果 ,也 就 是 通过 计算 
得 到 的 结果 。 这 样 写 好 之 后 ,JUnit 会 自动 进行 测试 并 把 测试 结果 反馈 给 用 户 。 


6. 忽略 测试 某 些 尚未 完成 的 方法 


如 果 在 写 程序 前 做 了 很 好 的 规划 ,那么 哪些 方法 是 什么 功能 都 应 该 定 下 来 。 因 此 ,即使 
该 方法 尚未 完成 , 它 的 具体 功能 也 是 确定 的 ,这 也 就 意味 着 可 以 为 它 编写 测试 用 例 。 但 是 ， 
如 果 已 经 把 该 方法 的 测试 用 例 写 完 . 但 该 方法 尚未 完成 ,那么 测试 的 时 候 一 定 是 “失败 ”"。 这 
种 失败 和 真正 的 失败 是 有 区 别 的 ,因此 JUnit 提供 了 一 种 方法 来 区 别 它们 , 那 就 是 在 这 种 测 
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试 函数 的 前 面 加 上 @Ignore 标注 ,这 个 标注 的 含义 就 是 “ 某 些 方法 尚未 完成 , 暂 不 参与 此 次 
测试 "。 这 样 测试 结果 就 会 提示 有 几 个 测试 被 忽略 ,而 不 是 失败 。 一 旦 完成 了 相应 函数 ,只 
需要 把 @Ignore 标注 删除 ,就 可 以 进行 正常 的 测试 。 


7. Fixture( 固 定 代码 段 ) 


Fixture 的 含义 就 是 “在 某 些 阶段 必然 被 调用 的 代码 ”。 例 如 上 面 的 测试 ,由 于 只 声明 了 
一 个 Calculator 对 象 , 它 的 初始 值 是 0, 但 是 测试 完 加 法 操作 后 , 它 的 值 就 不 是 0 了 ; 接 下 来 
测试 减法 操作 ,就 必然 要 考虑 上 次 加 法 操作 的 结果 。 如 果 这 样 设计 就 精 了 ! 我 们 非常 希望 
每 一 个 测试 都 是 独立 的 ,相互 之 间 没 有 任何 耦合 度 。 因 此 ,就 很 有 必要 在 执行 每 一 个 测试 之 
前 ,对 Calculator 对 象 进行 一 个 “复原 ”操作 ,以 消除 其 他 测试 造成 的 影响 。 因 此 ,“ 在 任何 一 
个 测试 执行 之 前 必须 执行 的 代码 ”就 是 一 个 Fixture, 用 @Before 来 标注 它 ,如 前 面 例子 
所 示 : 

@Before 

public void setUp() throws Exception ...{ 

calculaetor.clear(); 
) 

这 里 不 再 需要 @Test 标注 ,因为 这 不 是 一 个 Test, 而 是 一 个 Fixture, [8IJ8. An" fe fF 
何 测试 执行 之 后 需要 进行 的 收尾 工作 ?也 是 一 个 Fixture, 使 用 @After 来 标注 。 由 于 本 例 比 
较 简单 ,没有 用 到 此 功能 。 

上 文 介绍 了 两 个 Fixture 标注 ,分 别 是 @Before 和 @After, 下 面 来 看 看 它们 是 否 适 合 完 
成 如 下 功能 : 有 一 个 类 是 负责 对 大 文件 (超过 500MB) 进 行 读 写 , 它 的 每 一 个 方法 都 是 对 文 
件 进 行 操作 。 换 句 话说 ,在 调用 每 一 个 方法 之 前 ,都 要 打开 一 个 大 文件 并 读 入 文件 内 容 , 这 
绝对 是 一 个 非常 耗费 时 间 的 操作 。 如 果 使 用 @Before 和 @After, 那 么 每 次 测试 都 要 读 取 一 
次 文件 ,效率 极其 低下 。 这 里 所 希望 的 是 在 所 有 测试 一 开始 读 一 次 文件 ,所 有 测试 结束 之 后 
释放 文件 ,而 不 是 每 次 测试 都 读 文 件 。JUnit 的 作者 显然 也 考虑 到 了 这 个 问题 , 它 给 出 了 
@BeforeClass #I@ AfterClass 两 个 Fixture 来 实现 这 个 功能 。 从 名 字 上 就 可 以 看 出 ,用 这 
两 个 Fixture 标注 的 函数 ,只 在 测试 用 例 初始 化 时 执行 @BeforeClass 方法 , 当 所 有 测试 执行 
完毕 之 后 ,执行 @AfterClass 进行 收尾 工作 。 在 这 里 要 注意 一 下 ,每 个 测试 类 只 能 有 一 个 方 
法 被 标注 为 @BeforeClass 或 @AfterClass, 并 且 该 方法 必须 是 Public 和 Static 的 。 


8. 限时 测试 
例如 , 求 平方 根 的 函数 有 Bug, 是 个 死 循环 : 


public void squareRoot(int n) ...{ 
for(;;); //Bug : 死 循环 
} 
如 果 测 试 的 时 候 遇 到 死 循环 .— Re zs EFA FL GP. AE or FARER RE 
杂 , 循 环 柑 套 比较 深 的 程序 ,很 有 可 能 出 现 死 循环 ,因此 一 定 要 采取 一 些 预防 措施 。 限 时 测 
试 是 一 个 很 好 的 解决 方案 ,给 这 些 测 试 函数 设 定 一 个 执行 时 间 , 超 过 了 这 个 时 间 , 它 们 就 会 
被 系统 强行 终止 ,并 且 系 统 还 会 汇报 该 函数 结束 的 原因 是 因为 超时 ,这 样 就 可 以 发 现 这 些 
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Bug 了 。 要 实现 这 一 功能 ,只 需要 给 @Test 标注 加 一 个 参数 即 可 ,代码 如 下 。 


@Test(timeout = 1000) 

public void squareRoot() ...{ 

calculator. squareRoot(4) ; 
assertFquals(2, calculator.getResult()); 
) 


Timeout 参数 表明 了 要 设 定 的 时 间 ,单位 为 ms, 因 此 1000 就 代表 1s。 
9. 测试 异常 


Java 中 的 异常 处 理 也 是 一 个 重点 ,因此 经 常会 编写 一 些 需要 抛 出 异常 的 函数 。 那 么 ， 
如 果 觉 得 一 个 函数 应 该 抛 出 异常 ,但 是 它 没 抛 出 ,这 算 不 算 Bug 呢 ? 这 当然 是 Bug。JUnit 
也 考虑 到 了 这 一 点 ,来 帮助 我 们 找到 这 种 Bug。 例 如 ,计算 器 类 有 除法 功能 ,如 果 除 数 是 一 
个 0, 那么 必然 要 抛 出 “ 除 0 异常 ”。 因 此 ,很 有 必要 对 这 些 进行 测试 ,代码 如 下 。 

(QTest(expected = ArithmeticException.class) 

public void divideByZero() ...( 


calculator.divide(0); 


) 
如 上 述 代码 所 示 ,需要 使 用 @Test 标注 的 expected 属性 ,将 要 检验 的 异常 传递 给 它 , 这 
FÉ JUnit 框架 就 能 自动 检测 是 否 抛 出 了 指定 的 异常 。 


10. Runner (运行 器 ) 


读者 有 没有 想 过 这 个 问题 , 当 把 测试 代码 提交 给 JUnit 框架 后 ,框架 如 何 来 运行 代码 
呢 ? 答案 就 是 一 -Runner。 在 JUnit 中 有 很 多 个 Runner, 它 们 负责 调用 测试 代码 ,每 一 个 
Runner 都 有 各 自 的 特殊 功能 ,要 根据 需要 选择 不 同 的 Runner 来 运行 测试 代码 。 可 能 读者 
会 觉得 奇怪 ,前 面 写 了 那么 多 测试 ,并 没有 明确 指定 一 个 Runner Wi? 这 是 因为 JUnit 中 有 
一 个 默认 Runner, 如 果 没 有 指定 ,那么 系统 自动 使 用 默认 Runner 来 运行 代码 。 换 名 话说 ， 
下 面 两 段 代码 含义 是 完全 一 样 的 。 

import org. junit. internal. runners. TestClassRunner; 

import org. junit. runner. RunWith; 

// 使 用 了 系统 默认 的 TestClassRunner, 与 下 面 代码 完全 一 样 

public class CalculatorTest ...(...) 

(@RunWith(TestClassRunner. class) 

public class CalculatorTest ...{...} 

从 上 述 例子 可 以 看 出 ,要 想 指定 一 个 Runner. m E fii H] (9 Run With 标注 ,并 且 把 所 指 
定 的 Runner 作为 参数 传递 给 它 。 另 外 一 个 要 注意 的 是 .@RunWith 是 用 来 修饰 类 的 ,而 不 
是 用 来 修饰 函数 的 。 只 要 对 一 个 类 指定 了 Runner,; 那 么 这 个 类 中 的 所 有 函数 都 被 这 个 
Runner 来 调用 。 最 后 ,不 要 忘 了 包含 相应 的 Package, 上 面 的 例子 对 这 一 点 写 得 很 清楚 了 。 
接 下 来 ,展示 其 他 Runner 的 特有 功能 。 


11. 参数 化 测试 
可 能 遇 到 过 这 样 的 函数 , 它 的 参数 有 许多 特殊 值 ,或 者 说 它 的 参数 分 为 很 多 个 区 域 。 例 
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如 ,一 个 对 考试 分 数 进行 评价 的 函数 ,返回 值 分 别 为 “优秀 、 良 好 一般、 及 格 、 不 及 格 ”, 因 此 
在 编写 测试 的 时 候 ,至 少 要 写 5 个 测试 ,把 这 5 种 情况 都 包含 进去 ,这 确实 是 一 件 很 麻烦 的 
事情 。 还 使 用 先前 的 例子 ,测试 一 下 “计算 一 个 数 的 平方 ”这 个 函数 ,暂且 分 为 三 类 : 正 数 、 


0、 负 数 。 测 试 代码 如 下 。 


import org. junit. AfterClass; 

import org. junit. Before; 

import org. junit. BeforeClass; 

import org. junit. Test; 

import static org. junit. Assert. * ; 

public class AdvancedTest ...( 

private static Calculator calculator = new Calculator(); 
@ Before 

public void clearCalculator() ...( 

calculator.clear(); 

) 
@ Test 

public void square1() ...( 

calculator. square(2) ; 

assertEquals(4, calculator.getResult()); 

) 

@ Test 

public void square2() ...( 

calculator. square(0) ; 

assertEquals(0, calculator.getResult()); 

) 

@Test 

public void square3() ...( 

calculator. square( - 3); 

assertEquals(9, calculator.getResult()); 

) 

) 


为 了 简化 类 似 的 测试 ,JUnit4 提出 了 “参数 化 测试 "的 概念 ,只 写 一 
干 种 情况 作为 参数 传递 进去 ,一 次 性 地 完成 测试 。 代 码 如 下 。 


import static org. junit. Assert. assertEquals; 
import org. junit. Test; 

import org. junit. runner. RunWith; 

import org. junit. runners. Parameterized; 

import org. junit. runners. Parameterized. Parameters; 
import java. util. Arrays; 

import java. util. Collection; 
(@RunWith(Parameterized. class) 

public class SquareTest ...( 

private static Calculator calculator = new Calculator(); 
private int param; 

private int result; 

(Parameters 

public static Collection data() ...{ 


个 测试 函数 ,把 这 若 
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return Arrays.asList(new Object[][]...{ 
(2, 4}, 
...(0, 0), 
173,9); 
ni 
) 
// 构 造 函 数 , 对 变量 进行 初始 化 
public SquareTest( int param, int result) ...{ 
this.param = param; 
this.result = result; 


人 

public void square() ...( 

calculator. square( param) ; 

assertEquals(result, calculator. getResult()); 

! ) 

下 面 对 上 述 代码 进行 分 析 。 首 先 ,要 为 这 种 测试 专门 生成 一 个 新 的 类 ,而 不 能 与 其 他 测 
试 共 用 同一 个 类 ,此 例 中 定义 了 一 个 SquareTest 类 。 然 后 ,要 为 这 个 类 指定 一 个 Runner, 
而 不 能 使 用 默认 的 Runner, 因为 特殊 的 功能 要 用 特殊 的 Runner。@ RunWith 
(Parameterized. class) 这 条 语句 就 是 为 这 个 类 指定 了 一 个 ParameterizedRunner。 其 次 , 定 
义 一 个 待 测试 的 类 ,并且 定 义 两 个 变量 ,一 个 用 于 存放 参数 ,一 个 用 于 存放 期 待 的 结果 。 再 
次 ,定义 测试 数据 的 集合 ,也 就 是 上 述 的 data() 方 法 ,该 方法 可 以 任意 命名 ,但 是 必须 使 用 
() Parameters 标注 进行 修饰 。 这 个 方法 的 框架 就 不 耶 解 释 了 ,只 需要 注意 其 中 的 数据 是 一 
个 二 维 数组 ,数据 两 两 一 组 ,每 组 中 的 这 两 个 数据 ,一 个 是 参数 ,一 个 是 预期 的 结果 。 例 如 第 
—H (2. 4).2 就 是 参数 ,4 就 是 预期 的 结果 。 这 两 个 数据 的 顺序 无 所 谓 , 谁 前 谁 后 都 可 以 。 
之 后 是 构造 函数 ,其 功能 就 是 对 先前 定义 的 两 个 参数 进行 初始 化 。 在 这 里 要 注意 一 下 参数 
的 顺序 ,要 和 上 面 的 数据 集合 的 顺序 保持 一 致 。 如 果 前 面 的 顺序 是 {参数 ,期 待 的 结果 ), 那 
么 构造 函数 的 顺序 也 要 是 “构造 函数 (参数 ,期 待 的 结果 )”, 反 之 亦 然 。 最 后 就 是 写 一 个 简单 
的 测试 用 例 ,和 前 面 介绍 过 的 写法 一 样 。 


12. 打包 测试 


通过 前 面 的 介绍 可 以 感觉 到 ,在 一 个 项 目 中 .只 写 一 个 测试 类 是 不 可 能 的 ,我 们 会 写 出 
很 多 测试 类 。 可 是 这 些 测试 类 必须 一 个 一 个 地 执行 ,这 也 是 比较 麻烦 的 事情 。 鉴 于 此 ， 
JUnit 提供 了 打包 测试 的 功能 ,将 所 有 需要 运行 的 测试 类 集中 起 来 ,一 次 性 运行 完毕 ,大 大 
方便 了 测试 工作 。 具 体 代 码 如 下 。 


import org. junit. runner. RunWith; 

import org. junit. runners. Suite; 

@RunWith( Suite. class) 

@Suite. SuiteClasses(...{ 
CalculatorTest. class, 
SquareTest. class 
n 

public class AllCalculatorTests ...{} 
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可 以 看 到 ,这 个 功能 也 需要 使 用 一 个 特殊 的 Runner, 因 此 需要 向 @RunWith 标注 传递 
一 个 参数 Suite. class。 同 时 ,还 需要 另外 一 个 标注 @Suite. SuiteClasses 来 表明 这 个 类 是 一 
个 打包 测试 类 。 把 需要 打包 的 类 作为 参数 传递 给 该 标注 就 可 以 了 。 有 了 这 两 个 标注 之 后 ， 
就 已 经 完整 地 表达 了 所 有 的 含义 ,因此 下 面 的 类 已 经 无 关 紧 要 ,随便 起 一 个 类 名 ,内容 全 部 
为 空 即 可 。 


sm 


. 使 用 黑 盒 测试 工具 进行 软件 测试 的 侧重 点 是 什么 ? 

. 使 用 QTP 进行 功能 测试 的 测试 流程 是 什么 ? 

. 举例 说 明 如 何 使 用 QTP 进行 自动 化 测试 。 

. 使 用 白 盒 测试 工具 进行 软件 测试 的 侧重 点 是 什么 ? 

. 在 Eclipse 中 使 用 JUnit 需要 经 历 哪 几 个 步骤 ? 

. 举例 说 明 在 Eclipse3. 2 中 使 用 JUnit4 进行 单元 测试 的 方法 。 
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* 熟悉 常见 的 性 能 测试 工具 软件 LoadRunner 的 应 用 。 
。 熟悉 常见 的 安全 测试 工具 软件 AppScan 的 应 用 。 


@.1 性 能 测试 工具 
— 


9.1.1 LoadRunner 简介 


LoadRunner 是 一 种 预测 系统 行为 和 性 能 的 工业 标准 级 负载 测试 工具 。 通 过 以 模拟 上 
千 万 用 户 实施 并 发 负载 及 实时 性 能 监测 的 方式 来 确认 和 查找 问题 ,LoadRunner 能 够 对 整 
个 企业 架构 进行 测试 。 通 过 使 用 LoadRunner, 企 业 能 最 大 限度 地 缩短 测试 时 间 ,优化 性 能 
和 加 速 应 用 系统 的 发 布 周期 。 

目前 企业 的 网 络 应 用 环境 都 必须 支持 大 量 用 户 , 网 络 体系 架构 中 包含 各 类 应 用 环境 且 
由 不 同 供应 商 提供 软件 和 硬件 产品 。 难 以 预知 的 用 户 负 载 和 愈 来 愈 复杂 的 应 用 环境 使 公司 
时 时 担心 会 发 生 用 户 响 应 速度 过 慢 、 系 统 骨 溃 等 问题 。 这 些 都 不 可 避免 地 导致 公司 收益 的 
损失 。 

Mercury Interactive 的 LoadRunner 能 让 企业 保护 自己 的 收入 来 源 ,最 大 限度 地 利用 现 
有 的 IT 资源 而 无 须 购置 额外 硬件 ,并 确保 终端 用 户 在 应 用 系统 的 各 个 环节 中 对 其 测试 应 
用 的 质量 .可靠 性 和 可 扩展 性 都 有 良好 的 评价 。 

LoadRunner 是 一 种 适用 于 各 种 体系 架构 的 自动 负载 测试 工具 , 它 能 预测 系统 行为 并 
优化 系统 性 能 。LoadRunner 的 测试 对 象 是 整个 企业 的 系统 , 它 通过 模拟 实际 用 户 的 操作 
行为 和 实行 实时 性 能 监测 ,来 帮助 用 户 更 快 地 查找 和 发 现 问 题 。 此 外 ,LoadRunner 能 支持 
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广泛 的 协议 和 技术 ,为 用 户 的 特殊 环境 提供 特殊 的 解决 方案 。 

使 用 LoadRunner 的 Virtual User Generator, 能 很 简便 地 建立 起 系统 负载 。 该 引擎 能 
够 生成 虚拟 用 户 , 以 虚拟 用 户 的 方式 模拟 真实 用 户 的 业务 操作 行为 。 它 先 记 录 业 务 流程 (如 
下 订单 或 机 票 预订 ) ,然后 将 其 转化 为 测试 脚本 。 利 用 虚拟 用 户 ,可 以 在 Windows 、UNIX 
或 Linux 机 器 上 同时 产生 成 千 上 万 个 用 户 访问 。 所 以 LoadRunner 能 极 大 地 减少 负载 测试 
所 需 的 硬件 和 人 力 资源 。 另 外 ,LoadRunner 的 TurboLoad 专利 技术 能 提供 很 高 的 适应 性 。 

TurboLoad 使 用 户 可 以 承受 每 天 几 十 万 名 在 线 用 户 和 数 以 百 万 计 的 点 击 量 的 负载 。 

用 Virtual User Generator 建立 测试 脚本 后 ,可 以 对 其 进行 参数 化 操作 ,这 一 操作 能 让 
用 户 利用 几 套 不 同 的 实际 发 生 数 据 来 测试 应 用 程序 ,从 而 反映 出 本 系统 的 负载 能 力 。 以 
一 个 订单 输入 过 程 为 例 ,参数 化 操作 可 将 记录 中 的 固定 数据 ,如 订单 号 和 客户 名 称 ,由 可 
变 值 来 代替 。 在 这 些 变量 内 随意 输入 可 能 的 订单 号 和 客户 名 来 匹配 多 个 实际 用 户 的 操作 
行为 。 

LoadRunner 通过 它 的 Data Wizard 来 自动 实现 其 测试 数据 的 参数 化 。Data Wizard 直 
接连 接 数 据 库 服务 器 ,从 中 可 以 获取 所 需 的 数据 (如 订单 号 和 用 户 名 ) 并 直接 将 其 输入 到 测 
试 脚本 。 这 样 避免 了 了 人工 处 理 数 据 的 需要 ,节省 了 大 量 的 时 间 。 

为 了 进一步 确定 虚拟 用 户 能 够 模拟 真实 用 户 , 可 利用 LoadRunner 控制 某 些 行为 特性 。 
例如 ,只 需要 单 击 鼠 标 , 就 能 轻易 控制 交易 的 数量 、 交 易 频 率 、 用 户 的 思考 时 间 和 连接 速 
度 等 。 

虚拟 用 户 建 立 后 ,需要 设 定 负 和 载 方 案 、 业 务 流程 组 合 和 虚拟 用 户 数 量 。 用 LoadRunner 
的 Controller, 能 很 快 组 织 起 多 用 户 的 测试 方案 。Controller 的 Rendezvous 功能 提供 一 个 
互动 的 环境 ,在 其 中 既 能 建立 起 持续 且 循 环 的 负载 ,又 能 管理 和 驱动 负载 测试 方案 。 而 且 ， 
可 以 利用 它 的 日 程 计划 服务 来 定义 用 户 在 什么 时 候 访 问 系统 以 产生 负载 。 这 样 , 就 能 将 测 
试 过 程 自动 化 。 同 样 还 可 以 用 Controller 来 限定 负载 方案 ,在 这 个 方案 中 所 有 的 用 户 同时 
执行 一 个 动作 一 一 如 登录 到 一 个 库存 应 用 程序 一 一 来 模拟 峰值 负载 的 情况 。 另 外 ,还 能 监 
测 系统 架构 中 各 个 组 件 的 性 能 一 一 包括 服务 器 .数据库 、 网 络 设备 等 一 一 来 帮助 客户 决定 系 
统 的 配置 。 

LoadRunner 通过 它 的 AutoLoad 技术 ,为 用 户 提 供 更 多 的 测试 灵活 性 。 使 用 
AutoLoad, 可 以 根据 目前 的 用 户 事先 设 定 测试 目标 ,优化 测试 流程 。 例 如 ,用 户 的 目标 可 以 
是 确定 应 用 系统 承受 的 每 秒 点 击 量 或 每 秒 的 交易 量 。 

LoadRunner 内 含 集成 的 实时 监测 器 ,在 负载 测试 过 程 的 任何 时 候 , 用 户 都 可 以 观察 到 
应 用 系统 的 运行 性 能 。 这 些 性 能 监测 器 实时 显示 交易 性 能 数据 (如 响应 时 间 ) 和 其 他 系统 组 
件 , 包 括 Application Server, Web Server、 网 络 设备 和 数据 库 等 的 实时 性 能 。 这 样 , 就 可 以 
在 测试 过 程 中 从 客户 和 服务 器 的 双方 面 评估 这 些 系 统 组 件 的 运行 性 能 ,从 而 更 快 地 发 现 
问题 。 

再 者 ,利用 LoadRunner 的 ContentCheck TM, 可 以 判断 负载 下 的 应 用 程序 功能 正常 与 
否 。ContentCheck 在 虚拟 用 户 运 行 时 ,检测 应 用 程序 的 网 络 数据 包 内 容 , 从 中 确定 是 否 有 
错误 内 容 传 送出 去 。 它 的 实时 浏览 器 帮助 用 户 从 终端 用 户 角度 观察 程序 性 能 状况 。 

一 旦 测试 完毕 ,LoadRunner 收集 汇总 所 有 的 测试 数据 ,并 提供 高 级 的 分 析 和 报告 工 
具 ,以便 迅 速 查找 到 性 能 问题 并 追溯 缘由 。 使 用 LoadRunner 的 Web 交易 细节 监测 器 ,用 
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户 可 以 了 解 到 将 所 有 的 图 像框 架 和 文本 下 载 到 每 一 网 页 上 所 需 的 时 间 。 例 如 ,这 个 交易 细 
节 分 析 机 制 能 够 分 析 是 否 因为 一 个 大 尺 才 的 图 形 文件 或 是 第 三 方 的 数据 组 件 造成 应 用 系统 
运行 速度 减 慢 。 另 外 , Web 交易 细节 监测 器 分 解 用 于 客户 端 、 网 络 和 服务 器 上 端 到 端的 反 
LoadRunner 支持 广泛 的 协议 ,可 以 测试 各 种 IT 基础 架构 。 

图 9-1 给 出 了 LoadRunner 的 性 能 测试 过 程 。LoadRunner 将 性 能 测试 过 程 分 为 计划 
测试 ,测试 设计 、 创 建 VU 脚本 、 创 建 测试 场景 运行 测试 场景 和 分 析 结 果 6 个 步 又。 

计划 测试 阶段 主要 进行 测试 需求 的 收集 、 典 型 场景 的 确定 ; 测试 设计 阶段 主要 进 
行 测试 用 例 的 设计 ; 创建 VU 脚本 阶段 主要 根据 设计 的 用 例 创建 脚本 ; 创建 测试 场景 
阶段 主要 进行 测试 场景 的 设计 和 设置 ,包括 监控 指标 的 设 = TEER 
iE. 运行 测试 场景 阶段 对 已 创建 的 测试 场景 进行 测试 . 收 LIE | 
集 相应 数据 ; 分 析 结 果 阶段 主要 进行 结果 分 析 和 报告 CZ |] [ mama ] 
工作 。 


LoadRunner 提供 的 这 个 性 能 测试 过 程 已 经 涵盖 了 性 能 第 三 步 创建 YU 脚本 | 


测试 工作 的 大 部 分 内 容 ,但 由 于 该 过 程 过 于 紧密 地 与 一 一 一 + 
AART E i 第 四 步 创建 测试 场景] 
LoadRunner 工具 集成 ,没有 兼顾 使 用 其 他 工具 ,或 是 用 户 i 


自行 设计 工具 的 需求 ,也 不 能 称 为 是 一 个 普 适 性 的 测试 gn 运行 测试 场景 | 
过 程 。 


另外 ,LoadRunner 提供 的 该 性 能 测试 过 程 并 未 对 计划 L AD 人 结果 | 
测试 阶段 ,测试 设计 阶段 的 具体 行为 .方法 和 目的 进行 详细 图 91 LoadRunner 的 性 能 
描述 ,因此 该 方法 最 多 只 能 称 为 “使 用 LoadRunner 进行 测试 测试 过 程 


的 过 程 ”, 而 不 是 一 个 适应 性 广泛 的 性 能 测试 过 程 。 
9.1.2 安装 过 程 


(1) 运行 setup. exe, 如 图 9-2 所 示 。 


HP LoadRunner 11.00 
安装 指南 


自述 文件 


试 的 许可 证 服务 器 安装 程 


图 9-2 运行 setup. exe 
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(2) 单 击 “ 安 装 ” 按 钮 ,安装 程序 会 自动 检查 所 需 组 件 是 否 都 已 安装 ,确定 都 安装 后 弹出 
如 图 9-3 所 示 页 面 。 


$) HP LoadRunner 11.00 Fee =) 
欢迎 使 用 HP LoadRunner 11.00 安装 程序 


安装 程序 将 指导 您 完成 将 以 下 组 件 安装 到 您 的 计算 机 所 需 的 步 马 ; 


您 计算 机 上 的 HP LosdRunner 11.00。 


exa 


[E Id 
[E DS 
. 安装 


e 完成 单 击 “ 下 一 步 ” 


P35 


图 9-3 安装 欢迎 页 面 
(3) 选择 “我 同意 ”选项 , 单 击 “下 一 步 ” 按 钮 ,如 图 9-4 所 示 。 
i9 HP LoadRunner 


许可 协议 


现在 请 花 一 些 时 间 阅 读 许可 协议 。 F M Ea n 请 
AT “RAB” , PUS “TE”. SNJ, WAE “R 


ca 


LoadRunner 
安装 END USER LICENSE AGREEMENT 


PLEASE READ CAREFULLY- THE USE OF THE SOFTWARE IS SUBJECT TO THE TERMS 
PEST ANDCONDITIONS THAT FOLLOW ("AGREEMENT") UNLESS THE SOFTWARE IS 
SUBJECT TO A SEPARATE LICENSE AGREEMENT BETWEEN YOU ANDHP OR ITS 


SUPPLIERS. BY DOWNLOADING, INSTALLING, COPYING, ACCESSING, OR USING THE 

o 安装 类 型 SOFTWARE OR BY CHOOSING THE “I ACCEPT” OPTIONLOCATEDON OR ADJACENT 
[TO THE SCREEN WHERE THIS AGREEMENT MAY BE DISPLAYED YOU AGREE TO THE 
TERMS OF THIS AGREEMENT, ANY APPLICABLE WARRANTY STATEMENT ANDTHE 
TERMS AND CONDITIONS CONTAINEDIN THE “ANCILLARY SOFTWARE" (as defined 
below) IF YOU ARE ACCEPTING THESE TERMS ON BEHALF OF ANOTHER PERSON OR A 
COMPANY OR OTHER LEGAL ENTITY, YOU REPRESENT ANDWARRANT THAT YOU 


e 完成 口 我 不 同意 四 ) ORAE QU 


<s J(T—= o y 
—— e 


图 9-4 许可 协议 


(4) 注意 选择 安装 路 径 , 单 击 * 下 一 步 ?按钮 ,如 图 9-5 所 示 。 
(5) 确认 安装 ,程序 开始 执行 安装 , 单 击 " 下 一 步 ?按钮 ,如 图 9-6 所 示 。 
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iZ HP LoadRunner 11.00 


安装 程序 会 HP LoadRunner 11.00 安装 到 以 下 文件 夹 。 


要 请 单 击 “ 下 一 步 ”。 要 安装 到 其 他 文件 来 ， 请 在 下 面 输入 或 
LM 


单 
您 可 以 单 击 


“磁盘 已 用 空间 ”按钮 查看 每 个 磁盘 驱动 器 上 的 可 用 磁盘 空间 。 


DE qu 
磁盘 已 用 空间 QD. . 


图 9-5 选择 安装 路 径 


i8 HP LoadRunner 11.00 
确认 安装 


安装 程序 已 就 绪 ,即将 在 悠 的 计算 机 上 安装 JP LoadRunner 11.00. 
单 击 “ 下 一 步 ”以 开始 安装 。 

LO 

LoadRunner 

安装 


e 欢迎 


e 安装 类 型 
日 确认 
° 安装 


. 完成 


[=== wj 取消 


图 9-6 确认 安装 
(6) 显示 程序 执行 安装 的 状态 ,如 图 9-7 所 示 。 
CD 程序 安装 完成 , 单 击 “ 完 成 ”按钮 ,如 图 9-8 所 示 。 
所 示 。 
此 时 ,成 功 地 安装 了 LoadRunner 11。 


(8) 安装 完成 后 ,系统 会 自动 打开 LoadRunner License Information 对 话 框 ,如 图 9-9 
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ÉZ HP LoadRunner 11.00 
正在 安装 HP LoadRunner 11.00 


正在 安装 WP LosdBunner 11.00. 


复制 新 文件 
E KGwwCkw —— 


图 9-7 程序 执行 安装 的 状态 


E HP LoadRunner 11.00 


LO) | 


JRunner 


° 欢迎 
o 安装 类 型 
e 确认 


LoadRunner License Info; 


License Keys 


LicenseKey1 


安装 完成 


已 成 功 安装 MP LosdRunner 11.00. 
单 击 “ 完 成 ”以 退出 。 


License Key Information 
Type: 
License Validity: 
Vuser Types Monitors š Modules 
Global 再 [Rescuce Montor 四 
Remote Performa. 1 [Network Delay = 
[SNMP Montor 
TUXEDO Montor 
SiverStream 
BroadVision 
ColdFusion a 


Host ID: CRHXHG-CHJU-AZDW 


EE 后 El| (uras 


图 9-9 LoadRunner License Information 对 话 框 
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9.1.3 创建 脚本 


在 LoadRunner Launcher 窗 格 中 , 单 击 “ 创 建 /编辑 脚本 ”, 打 开 VuGen 起 始 页 。 
在 欢迎 使 用 Virtual User Generator 区 域 中 , 单 击 “ 新 建 脚本 ”按钮 ,打开 “新 建 虚拟 用 
户 ” 对 话 框 ,显示 “新 建 单 协 议 脚 本 ”选项 ,如 图 9-10 所 示 。 


eb (Click and Script) 


Sp Web Services 
@Evindovs Sockets 


9-10 “新 建 单 协议 脚本 ”选项 


协议 是 客户 端 用 来 与 系统 后 端 进行 通信 的 语言 。HP Web Tours 是 一 个 基于 Web 的 
应 用 程序 ,因此 将 创建 一 个 Web Vuser 脚本。 确保“ 类别" 是 所 有 协议 。VuGen 将 列 出 适 
用 于 单 协议 脚本 的 所 有 可 用 协议 。 向 下 滚动 列表 ,选择 Web (HTTP/HTML) 并 单 击 创建 ， 
创建 一 个 空白 Web 脚本 。 

空白 脚本 以 VuGen 的 向 导 模 式 打开 ,同时 左 侧 显示 任务 窗 格 。 如 果 没 有 显示 任务 窗 
格 , 单 击 工具 栏 上 的 任务 按钮 。 如 果 * 开 始 录制 ?对 话 框 自动 打开 , 单 击 取消 。 

VuGen 的 向 导 指导 用 户 逐 步 完 成 创建 脚本 并 使 其 适应 测试 环境 的 过 程 。 任 务 窗 格 中 
列 出 脚本 创建 过 程 中 的 各 个 步骤 或 任务 。 如 图 9-11 Bros ,在 用 户 执行 各 个 步骤 的 过 程 中 ， 
VuGen 将 在 窗口 的 主要 区 域 显示 详细 说 明和 指示 信息 。 

可 以 自 定义 VuGen 窗口 来 显示 或 隐藏 各 个 工具 栏 。 要 显示 或 隐藏 工具 栏 , 选 择 * 视 图 ”~ 
“工具 栏 ”, 并 选中 /不 选中 目标 工具 栏 旁边 的 复 选 标 记 。 

单 击 “ 录 制 " 窗 格 中 的 “录制 应 用 程序 ”, 如 图 9-12 所 示 。 

也 可 以 选择 Vuser>“ 开 始 录制 "或 者 单 击 页 面 顶部 工具 栏 中 的 “开始 录制 ”按钮 ,打开 
“开始 录制 "对话 框 ,如 图 9-13 所 示 。 

“URL 地 址 ” 框 中 输入 要 录制 的 地 址 。 在 “录制 到 操作 ” 框 中 ,选择 Action。 单 击 “ 确 
定 ” 按 钮 。 

录制 结束 后 在 浮动 工具 栏 上 单 击 “ 停 止 " 以 停止 录制 ,并 保存 结果 。 
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名 称 7 - web (HTTP/HTML)] 


脚本 创建 简介 


VuGen BUR SAESCRIERHUSBSI UT 8 20: E CBS 


1. 录制 
BRERHRH EL SRERESINE. 
ETITHRAMBIE, vuGen ISORE— 1-539. RUTEREN, Vucer EUR- EORR, MTER vuGen 


2, 验证 


SEDE (EXIT RORIGGR Gr TUUS UEXCIPRES TB EID 


3, 增强 


EIBEE RS BORSE ， 可 以 更 准确 地 模拟 业务 流程 ， 
同时 使 您 可 以 收集 基本 数 笑 。 添 加 事务 、 内 容 科 查 和 霄 数 。 


4. 设置 负载 
RUAS-ABPBUERSEREISRAIREREGUUSRTR ER 


FeR, e "r—5"fH. 


T OTRRARRMAR , WNE , 并 打开 录制 


图 9-11 


脚本 创建 简介 


录制 简介 
开始 之 前 


EN EN, ts, Er tI -APATIN 


HOBIGATIOTTDT: int Acten M End, BX, int mA: Lind naira US. 
二 全 这 和， DA: RR UAR ba "mon 让 B, OR es WTILEURROEPIEVT AINT 
Bex =: B t$. D" 


5 [SEM 


mana 


Bo fa 


图 9-12 录制 简介 
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ad xl 


[aost meme moos — E] L | 


图 9-13 “开始 录制 ?对 话 框 


Vuser 脚本 生成 时 会 打开 “代码 生成 "弹出 窗口 。 然 后 VuGen 向 导 会 自动 执行 任务 窗 
格 中 的 下 一 步 ,并 显示 关于 录制 情况 的 概要 信息 。 

如 图 9-14 所 示 ,“ 录 制 概 要 ”包含 协议 信息 以 及 会 话 期 间 创 建 的 一 系列 操作 。VuGen 
为 录制 期 间 执行 的 每 个 步骤 生成 一 个 快照 , 即 录制 期 间 各 窗口 的 图 片 。 这 些 录制 的 快照 以 
缩 略图 的 形式 显示 在 右 窗 格 中 。 如 果 由 于 某 种 原因 要 重新 录制 脚本 ,可 单 击 页 面 底部 的 * 重 
新 录制 ”按钮 。 

至 此 脚本 录制 完毕 。 


录制 概要 
协议 


在 录制 会 话 过 程 中 检测 到 以 下 协议 : 
auma eras 
Web (HTTP/HTML) 2 


有 头 详细 的 录制 信息 ， 请 打开 录制 日 志 


右 窗 格 显示 了 所 录制 内 容 的 缩 路 图 快照 。 
了 所 需 的 业务 流 得 ， 
加 果 未 正确 录制 ， 请 单 击 “ 重 新 录制 ”录制 该 业务 流程 


9-14 录制 概要 


9.1.4 负载 测试 


打开 HP LoadRunner。 选 择 “ 开 始 ” 一 “程序 ”> HP LoadRunner> LoadRunner, 打开 
HP LoadRunner 窗口 。 
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在 LoadRunner Launcher 窗 格 中 单 击 “ 运 行 负载 测试 ”, 打 开 HP LoadRunnerController, 如 
图 9-15 所 示 。 


图 9-15 ”新建 场景 
选择 录制 好 的 脚本 , 单 击 “ 确 定 ” 按 钮 ,打开 Controller 窗口 ,如 图 9-16 所 示 。 


maa rio 05 00 om ss) 
Wu vaser — fuic: WE 00:000 Om s AME s + 
. | 


图 9-16 Controller 窗口 


在 “场景 组 ” 窗 格 中 配置 Vuser 组 ,可 以 创建 代表 系统 中 典型 用 户 的 不 同 组 ,指定 运行 
的 Vuser 数目 以 及 运行 时 使 用 的 计算 机 。 

设计 负载 测试 场景 时 ,可 以 为 性 能 指标 定义 目标 值 或 服务 水 平 协议 (SLA)。 运 行 场景 
时 ,LoadRunner 收集 并 存储 与 性 能 相关 的 数据 。 分 析 运 行情 况 时 ,Analysis 将 这 些 数 据 与 
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SLA 进行 比较 ,并 为 预先 定义 的 测量 指标 确定 SLA 状态 。 
从 Controller 菜单 中 选择 “文件 ”>“ 打 开 ”, 并 打开 录制 好 的 脚本 ,将 打开 LoadRunner 
Controller 的 “设计 ”选项 卡 , 如 图 9-17 所 示 。 


Default Schedule >] 


图 9-17 “设计 ”选项 卡 


此 时 ,可 以 准备 运行 测试 了 。 
1. 运行 时 设置 


CD 打开 “运行 时 设置 ”。 

确保 显示 “任务 ” 窗 格 ( 如 果 未 单 击 “ 任 务 ” 按 钮 )。 在 “任务 ”" 窗 格 中 单 击 “验证 回放 ”。 在 
说 明 窗 格 中 的 标题 “运行 时 设置 ?下 单 击 “打开 运行 时 设置 " 超 链接 。 还 可 以 按 FA 键 或 单 击 
工具 栏 中 的 “运行 时 设置 按钮 ,打开 * 运 行 时 设置 ?对 话 框 ,如 图 9-18 所 示 。 

(2) 打开 “运行 逻辑 ”设置 ,如 图 9-19 所 示 。 选 择 “ 运 行 逮 辑 节 点 。 

(3) 进行 “ 步 设 置 , 如 图 9-20 所 示 。 

通过 此 节点 可 以 控制 选 代 之 间 的 时 间 。 可 以 将 此 时 间 指 定 为 随机 时 间 。 这 将 准确 模拟 
用 户 在 操作 之 间 等 待 的 实际 时 间 设置 ,但 在 随机 时 间 间 隔 下 ,用户 看 不 到 实际 用 户 在 重复 操 
作 之 间 等 待 恰好 为 60s 的 情况 。 

选择 第 三 个 选项 并 选择 60. 00 一 90. 00s 之 间 的 随机 时 间 间 隔 。 
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运行 时 设置 for script: rom 


图 9-18 “运行 时 设置 "对 话 框 


图 9-19 ”选择 “运行 逻辑 ”节点 图 9-20 "S" 


(4) 设置 “日 志 ” 设 置 ,如 图 9-21 所 示 。 


图 9-21 “日 志 ” 设 置 
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“日 志 ? 设 置 指示 运行 测试 时 要 记录 的 信息 详细 级 别 。 开 发 期 间 , 出 于 调试 目的 ,可 以 选 
择 启 用 某 级 别 的 日 志 记 录 , 但 验证 脚本 可 以 正常 工作 后 , 仅 可 以 启用 或 禁用 错误 日 志 记录 。 
选择 “扩展 日 志 ? 并 启用 “参数 蔡 换 ”。 

(5) 查看 “思考 时 间 ” 设 置 ,如 图 9-22 所 示 。 


图 9-22 “思考 时 间 ” 设 置 


请 勿 进行 任何 更 改 ,可 通过 Controller 设置 思考 时 间 。 记 住 , 在 VuGen 中 运行 脚本 时 ， 
由 于 脚本 不 包括 思考 时 间 , 因 此 脚本 将 快速 运行 。 
(6) 单 击 “ 确 定 ” 按 钮 关闭 “运行 时 设置 "对话 框 。 


2. 运行 负载 测试 


单 击 “ 启 动 场景 "按钮 。 如 图 9-23 所 示 ,将 显示 Controller 运行 视图 ,Controller 将 开始 
运行 场景 。 在 “场景 组 ” 窗 格 中 ,可 以 看 到 Vuser 逐渐 开始 运行 并 在 系统 上 生成 负载 。 可 以 
在 联机 图 上 看 到 服务 器 对 Vuser 操作 的 响应 度 。 


图 9-23 运行 场景 
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9.1.5 脚本 运行 状态 

1. 检查 性 能 图 

如 图 9-24 所 示 ,“ 正 在 运行 Vuser -整个 场景 ”图 显示 在 指定 时 间 运 行 的 Vuser 数 ;“ 事 
务 响应 时 间 - 整 个 场景 "图 显示 完成 每 个 事务 所 用 的 时 间 ;“ 每 秒 点 击 次 数 -整个 场景 "图 显示 


场景 运行 期 间 Vuser 每 秒 向 Web 服务 器 提交 的 点 击 次 数 (HTTP 请 求 数 );“Windows 资 
源 - 最 后 一 个 60 秒 ” 图 显示 场景 运行 期 间 评 测 的 Windows 资源 。 


图 9-24 性 能 图 


2. 突出 显示 单个 测量 值 


双击 “Windows 资源 ”图 将 其 放大 。 注 意 每 个 测量 值 都 显示 在 图 例 中 用 不 同 颜色 标记 
的 行 中 ,每 行 对 应 图 中 与 之 颜色 相同 的 一 条 线 。 选 中 一 行 时 ,图 中 的 相应 线条 将 突出 显示 ， 
反之 则 不 突出 显示 。 再 次 双击 图 将 其 缩小 。 


3. 查看 吞吐 量 信息 


如 图 9-25 所 示 ,选择 可 用 图 树 中 的 吞吐 量 图 ,将 其 拖 放 到 图 查看 区 域 .“ 吞 吐 量 ” 图 中 
的 测量 值 显示 在 画面 窗口 和 图 例 中 。“ 知 吐 量 ”图 显示 Vuser 每 秒 从 服务 器 接收 的 数据 总 
量 ( 以 字 节 为 单位 )。 可 以 将 此 图 与 "事务 响应 时 间 ” 图 比较 ,查看 吞吐 量 对 事务 性 能 的 影响 。 
如 果 随 着 时 间 的 推移 和 Vuser 数目 的 增加 ,吞吐 量 不 断 增加 ,说 明 带 宽 够 用 。 如 果 随 着 
Vuser 数目 的 增加 ,吞吐 量 保持 相对 平稳 ,可 以 认为 是 带宽 限制 了 数据 流量 。 


9-25 ”吞吐 量 信息 


模拟 用 户 时 ,应 该 能 够 实时 查看 用 户 的 操作 ,确保 执行 正确 的 步骤 。 通 过 Controller, 
可 以 使 用 运行 时 查看 器 实时 查看 操作 。 
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4. 查看 Vuser 信息 


要 直观 地 查看 Vuser 的 操作 ,执行 以 下 操作 。 
单 击 Vuser 按钮 ,打开 Vuser 窗口 ,如 图 9-26 所 示 。 


9-26 Vuser 窗口 


状态 列 显示 每 个 Vuser 的 状态 。 在 上 例 中 ,可 以 看 到 有 4 个 正在 运行 的 Vuser 和 4 + 
已 经 关闭 的 Vuser。 计 划 程 序 中 的 启动 Vuser 操作 指示 Controller 每 次 释放 两 个 Vuser。 
随 着 场景 的 运行 ,将 继续 每 隔 30s 向 组 中 添加 两 个 Vuser。 

从 Vuser 列表 中 选择 一 个 正在 运行 的 Vuser。 单 击 Vuser 工具 栏 上 的 显示 选 定 的 
Vuser 按钮 ,打开 运行 时 查看 器 并 显示 所 选 Vuser 当前 执行 的 操作 。 当 Vuser 执行 录制 的 
脚本 中 所 包含 的 各 个 步骤 时 ,窗口 不 断 更 新 。 单 击 Vuser 工具 栏 上 的 “隐藏 选 定 的 Vuser” 
按钮 ,关闭 “运行 时 查看 器 ”日 志 。 


5. 查看 用 户 操作 信息 


对 于 正在 运行 的 测试 ,要 检查 测试 期 间 各 个 Vuser 的 进度 ,可 以 查看 包含 Vuser 操作 
文本 概要 信息 的 日 志文 件 。 

要 查看 事件 的 文本 概要 信息 ,执行 以 下 操作 。 

在 Vuser 窗口 中 选择 一 个 正在 运行 的 Vuser, 单 击 * 显 示 Vuser 日 志 ” 按 钮 ,Vuser 日志 
窗口 打开 ,如 图 9-27 所 示 。 

日 志 中 包含 与 Vuser 操作 对 应 的 消息 。 例 如 ,在 上 面 的 窗口 中 ,消息 Virtual 
UserScript started 说 明 场 景 已 启动 。 滚 动 到 日 志 底 部 ,查看 为 所 选 Vuser 执行 的 每 个 操作 
添加 的 新 消息 。 

关闭 Vuser 日 志 窗 口 和 Vuser 窗口 。 


6. 查看 运行 状态 
“场景 状态 ” 窗 格 显示 场景 的 整体 状况 ,如 图 9-28 所 示 。 


Vuser travel_agent:2 输出 文件 GEEET) 


E m @ E? 


4 Run Mode: HTML 
则 运行 时 设置 文件 


ef vaser_init cfl3) 
é ovuser init c(13) 
ef vaser init c(13) 
é vuser init c(13) 
init. e(13) 
init. c(13) 


é vaser, 


é vuser, 


é vuser init. c(13) 


E- Lj Virtual User Script started at : 
日 正在 开始 操作 vaser_init- 
df Web Turbo Replay of LosdRunner 9.50 SPI for WIN2003; Yet 


B- A vuser init.e(11)- 


é vuser init c(13): 


“C:\Documents and SettingsMAdninistrator 


通知 : 事务 “S01_T01 HomePage" 

AE “http://127.0.0.1:1080/WebTours; 
E “http://127.0.0.1:1080/WebTours; 
在 KIWL "http: //127.0.0.1:1080/8eb1 
在 HTML "http: //127. 0.0. 1:1080/Web] 
HE "http: //127. 0.0. 1:1080/WebTours; 
Æ "http: //127. 0.0. 1: 1080/WebTour s, 
在 HTML "http: //121.0. 0. 1: 1080/4 eb1 
web url("WebTours") 已 成 功 ，6454 个 


2009-06-15 14:34:25 4 
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运行 Vuser 
已 用 时 间 
每 秒 点 击 次 数 


D wuser init.c(22): 通知 : 事务 “S01_T01_NMomePage 
| 49 vuser_init c(24): lr think time:2.67 $5 好 制 思考 时 间 为 € 
DL 用 waser init cf251- Wm- W "sn! TO? TorTn” nE 二 


* 
[eiXprogran. filesihp MoadrunnerVscriptsVbasic tutorial 59VresVL, [f]. | 
F 刷新 GS 1000 E) soo [GERIT] 


图 9-27 ”Vuser H i Bi H 


失败 的 事务 
错误 


图 9-28 “场景 状态 ” 窗 格 


单 击 “ 场 景 状 态 ” 窗 格 中 通过 的 事务 ,查看 事务 的 详细 信息 列表 。 打 开 “ 事 务 ” 对 话 框 ,可 
以 看 到 Vuser 操作 的 详细 信息 ,如 图 9-29 所 示 。 


S01_T03_SearchFight 0.2 
SO1_TO7_SignOff 02 
jvuser_end_Transaction |0.2 
501_T05_PaymeniDetal02 
Action Transaction 10.2 


|vuser init Transaction 10.1 
S01 T04 BookFlight — 0.2 
S01 TOi HomePage 0.1 
S01 TO& Checkltinerar/0.2 


图 9-29 Vuser 操作 的 详细 信息 


0.2 安全 测试 工具 
— 


9.2.1 Rational AppScan 原理 及 简介 


Rational AppScan 是 对 Web 应 用 和 Web Services 进行 自动 化 安全 扫描 的 黑 盒 工具 , 它 
不 但 可 以 简化 企业 发 现 和 修复 Web 应 用 安全 隐患 的 过 程 (这 些 工作 以 往 都 是 由 人 工 进行 ， 
成 本 相对 较 高 ,但 是 效率 却 非常 低下 ), 还 可 以 根据 发 现 的 安全 隐患 ,提出 针对 性 的 修复 建 
议 ,并 能 形成 多 种 符合 法 规 . 行 业 标准 的 报告 ,方便 相关 人 员 全 面 了 解 企业 应 用 的 安全 状况 。 
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AppScan 包括 测试 版 .Build 版 .标准 版 ,企业 版 。 标 准 版 是 一 个 单机 版 工具 ,个 人 可 以 
利用 它 针 对 Web 应 用 进行 黑 盒 测试 。 

AppScan 拥有 一 个 庞大 完整 的 攻击 规则 库 , 也 称 为 特征 库 , 通 过 在 HTTP Request 中 
插入 测试 用 例 的 方法 实现 几 百 种 应 用 攻击 ,再 通过 分 析 HTTP Response 判断 该 应 用 是 否 
存在 相应 的 漏洞 。 特 征 库 是 可 以 随时 添加 的 。 它 的 扫描 分 为 以 下 两 个 阶段 。 

阶段 一 : 探测 阶段 。 探 测 站 点 下 有 多 少 个 Web 页 面 ,并 列 出 来 。 

阶段 二 : 测试 阶段 。 针 对 探测 到 的 页 面 ,应 用 特征 库 实施 扫描 。 扫 描 完 毕 , 会 给 出 一 个 
漏洞 的 详细 报告 。 

界面 分 为 以 下 5 大 区 域 。 

CD 视图 区 ; 

(2) Web 应 用 程序 树 状 列表 区 ; 

O) 结果 列表 区 ; 

CD 漏洞 统计 区 s 

(5) 漏洞 详细 信息 区 。 

IBM Rational AppScan 解决 方案 能 够 在 Web 开发 .测试 .维护 .运营 的 整个 生命 周期 
中 ,帮助 企业 高 效 地 发 现 、. 解 决 安全 漏洞 ,最 大 限度 地 保证 应 用 的 安全 性 。 


9.2.2 Rational AppScan 应 用 举例 


Web 安全 检测 主要 分 为 两 大 类 ,分 别 是 白 盒 检测 和 黑 盒 检测 。 白 盒 工 具 通 过 分 析 应 用 
程序 源 代码 以 发 现 问题 ,而 黑 盒 工 具 则 通过 分 析 应 用 程序 运行 的 结果 来 报告 问题 。Rational 
AppScan( 以 下 简称 AppScan) 属 于 后 者 , 它 是 业界 领先 的 Web 应 用 安全 检测 工具 ,提供 了 
扫描 \ 报 告 和 修复 建议 等 功能 。 


1. Rational AppScan 安装 
如 图 9-30 所 示 安 装 完成 后 ,启动 AppScan 应 用 程序 。 


IBM® Rationa AppScan Developer Edition/Build Edition V7.8.1 
16M ations! AppScan Develope:/Build Edition SEÜGERIT-TXTORRESHRIUBEDR, web 后 用 
zia. 


查看 发 布 信息 
<s 


图 9-30 ”安装 AppScan 
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2. Rational AppScan 主 界 面 


如 图 9-31 所 示 的 主 界面 中 ,菜单 栏 涵盖 了 AppScan 中 的 所 有 可 用 功能 。 工 具 条 中 为 
常用 功能 的 快捷 菜单 ,如 开始 扫描 、 扫 描 配 置 、. 扫 描 专 家 等 。 左 上 部 网 站 导航 视图 : 在 扫描 
过 程 中 AppScan 会 按照 一 定 的 层次 组 织 显 示 站 点 结构 图 (默认 是 按照 URL 层次 进行 组 织 ， 
用 户 可 以 在 扫描 配置 中 更 改 这 一 设置 )。 右 上 部 安全 问题 显示 视图 : AppScan 将 在 此 视图 
中 列 出 检测 到 的 所 有 安全 缺陷 。 左 下 部 安全 问题 汇总 视图 : AppScan 将 在 此 视图 中 列 出 
检测 到 的 安全 缺陷 统计 信息 。 右 下 部 安全 问题 详细 信息 视图 : 此 视图 的 内 容 与 安全 问题 
显示 视图 相关 ,用 来 显示 某 特定 安全 问题 的 详细 信息 ,包括 问题 介绍 、 修 复 建议 .测试 数 
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图 9-31 AppScan 主 界面 


3. Rational AppScan 配置 扫描 


首先 单 击 “ 文 件 ” 菜 单 , 在 子 菜 单 中 选择 “新 建 ”, 将 弹出 如 图 9-32 所 示 对 话 框 。 对 话 框 
中 列 出 了 AppScan 预先 提供 的 常用 扫描 模板 ,使 用 模板 可 以 大 大 简化 扫描 创建 过 程 ,提高 
工作 效率 ; 当然 ,用 户 也 可 以 根据 实际 情况 创建 自 定义 模板 。 为 了 方便 这 里 选择 demo. 
testfire. net, 此 模板 是 专门 为 测试 站 点 demo. testfire. net 而 设立 的 。 

然后 需要 选择 安全 扫描 的 类 型 : 如 果 是 Web 站 点 扫描 选择 “Web 应 用 程序 扫描 ”, 如果 
是 Web 服务 扫描 选择 “Web Service 扫描 ”。 因 为 要 对 demo. testfire. net 站 点 进行 测试 ,所 
以 选择 “Web 应 用 程序 扫描 ”, 并 单 击 “下 一 步 按 钮 ,如 图 9-33 所 示 。 
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EEEE] x 
最 近 的 模板 预定 义 的 模板 
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K] Hacme Bank 
K] WebSphere Portal 
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基于 参数 的 导航 
回 启动 扫 失 配置 向 导 (L) 
LITT 
图 9-32 新 建 扫描 


扫描 配置 向 导 
CE Apson. 欢迎 使 用 " 瑟 秆 向导" 


“配置 向 导 ” 将 帮助 修配 置 一 个 以 扫描 模板 为 基础 的 新 扫描 : deno. testfire net 


选择 起 要 执行 的 扫描 类 型: 
Oro 应 用 程序 扫描 | v 


Web Service 扫描 


系统 上 尚未 安装 ex TIEN 需要 它 来 扫描 Web service, 但 
不 需要 它 来 扫 捞 应 用 程序 。 要 立即 安装 ， 请 单 击 下 面 的 链接 。 


tp: //dovalosd2. boul der. i OMA 00/0 


图 9-33 扫描 配置 向 导 


下 面 是 各 种 扫描 参数 的 配置 ,包括 URL 和 服务 器 .登录 管理 .测试 策略 3 部 分 ,因为 
AppScan 模板 已 经 为 这 些 参数 设置 了 合适 的 值 , 因 此 不 需要 做 任何 修改 直接 单 击 “下 一 步 
按钮 即 可 ,如 图 9-34 所 示 o 

这 里 选择 “自动 ”, 并 输入 用 户 名 和 密码 , 单 击 “ 下 一 步 "按钮 ,如 图 9-35 所 示 。 

测试 策略 使 用 默认 的 策略 , 单 击 “下 一 步 ”按钮 ,如 图 9-36 所 示 。 

选择 “启动 全 面 自动 扫描 ”, 勾 选 “完成 “扫描 配置 向 导 ’ 后 启动 “扫描 专家 ”选项 , 单 击 


“完成 ”按钮 ,如 图 9-37 所 示 。 


进入 扫描 ,扫描 专家 分 析 后 生成 扫描 结果 ,如 图 9-38 和 图 9-39 所 示 。 
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图 9-34 扫描 参数 的 配置 


使 用 以 下 插 证 目 动 酶 录 应 用 程序 : 
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9-35 选择 登录 方法 ,并 输入 用 户 名 和 密码 
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9-36 测试 策略 


您 想 要 如 何 局 动 ? 
(G 局 动 全 面 自动 扫描 (和 
O 芭 使 用 自动 “探索 "” BIW 
O 使 用 “手动 探索 ”启动 (D 
加 我 格 稍 后 启动 扫描 (D) 


完成 “扫描 配置 向 导 ” 后 启动 “扫描 专 家 ”(S) 


《上 一 步 (B) 


图 9-37 完成 扫描 配置 向 导 
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图 9-39 扫描 结果 
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4. 扫描 配置 详解 


使 用 AppScan 对 demo. testfire. net 站 点 进行 安全 测试 扫描 时 使 用 了 模板 ,扫描 参数 都 
是 预先 设置 的 ,读者 可 能 对 其 意义 及 配置 方法 还 不 了 解 ,下 面 将 对 它们 进行 详细 介绍 。 扫 描 
配置 参数 可 以 在 创建 扫描 过 程 中 设置 ,也 可 以 在 创建 后 进行 设置 ,其 配置 过 程 和 效果 是 完全 
相同 的 。 如 果 选 择 的 不 是 测试 模板 , 则 需要 对 URL 和 服务 器 .登录 管理 、 测 试 策略 和 多 步 
操作 几 部 分 进行 配置 。 单 击 “* 扫 描 ” 下 的 “扫描 配置 ,对 其 进行 配置 ,如 图 9-40 所 示 。 

1) 配置 URL 和 服务 器 

配置 URL 和 服务 器 见 图 9-40。 


| 口 将 所 有 路径 作为 区 分 大 小 写 来 处 理 ( Unix. Linux 等 ) (D. 


O UB S SURE 
Ed eS TAARA ENE : 
123 120. 1.254 


网 还 原 为 已 保存 


K RAO 


图 9-40 配置 URL 和 服务 器 


2) 配置 登录 管理 

为 了 限制 用 户 对 站 点 部 分 功能 的 使 用 , 绝 大 多 数 Web 应 用 都 实现 了 用 户 认证 与 授权 ， 
即 通常 所 说 的 登录 控制 功能 , 非 授权 用 户 仅 可 以 访问 部 分 功能 。AppScan 的 安全 测试 是 通 
过 模拟 用 户 对 站 点 的 访问 来 实现 的 ,如 果 待 测试 站 点 有 需要 授权 才能 访问 的 内 容 , 就 必须 让 
AppScan 在 测试 过 程 中 通过 网 站 的 认证 。AppScan 提供 登录 管理 来 实现 此 功能 ,如 图 9-41 
所 示 。 

记录 (推荐 ) : 推荐 方式 ,需要 用 户 手 工 录制 登录 过 程 ; 当 AppScan 发 现 需要 登录 站 点 时 
将 自动 重 放 录制 过 程 实现 登录 。 单 击 面 板 上 的 红色 的 “记录 ”按钮 ,弹出 AppScan 的 内 置 浏 览 
器 ,在 此 浏览 器 中 转 到 登录 页 面 ,输入 账户 信息 完成 登录 即 可 ,AppScan 将 自动 记录 登录 过 程 。 

因为 AppScan 会 扫描 所 有 探测 到 的 需要 测试 的 页 面 ,包括 退出 页 面 ,如 果 AppScan 在 
测试 中 访问 了 退出 页 面 就 会 造成 用 户 会 话 终止 ,从 而 影响 后 续 的 测试 。 为 防止 此 类 情况 的 
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图 9-41 配置 登录 管理 


发 生 就 必须 配置 面板 下 方 的 “注销 页 面 检测 ”, 为 登录 页 面 设置 正确 的 匹配 模式 , AppScan 
再 根据 此 参数 的 设置 跳 过 对 退出 页 面 的 测试 。 

3) 配置 测试 策略 

如 图 9-42 所 示 ,AppScan 会 通过 预先 设 定 的 安全 规则 创建 测试 用 例 ,一 条 安全 规则 描 
述 了 某 安全 缺陷 的 信息 ,包括 缺陷 描述 、 修 复 建议 .确认 模式 等 。AppScan 集成 了 大 规模 的 
测试 规则 ,默认 情况 下 针对 一 个 页 面 可 能 会 生成 成 百 上 千 个 测试 用 例 , 但 是 这 些 用 例 中 往往 
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图 9-42 配置 测试 策略 
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有 很 大 一 部 分 对 于 应 用 本 身 来 说 是 没有 任何 意义 的 。 为 了 减少 测试 元 余 , 增 加 测试 的 有 效 
性 就 需要 甄选 符合 应 用 实际 情况 的 测试 规则 ,例如 针对 J2EE 站 点 的 安全 测试 就 不 需要 与 
.NET 相关 的 测试 规则 ,又 如 对 安全 性 要 求 不 高 的 站 点 (内 部 应 用 ) 只 需要 对 高 危险 的 安全 
缺陷 进行 探测 而 没 必 要 测试 所 有 。 测 试 策略 是 对 测试 规则 的 管理 ,用 户 可 以 根据 Web 应 用 
的 实际 项 目 情况 选择 合理 的 测试 规则 集 ,对 选 定 的 规则 集 可 以 通过 Export 的 方式 将 其 导出 
为 策略 文件 ,其 他 用 户 可 以 导入 策略 文件 以 保持 组 织 内 部 策略 规则 的 一 致 性 。 单 击 主 配置 
面板 左 端的 Test Policy 打开 测试 策略 视图 ,视图 中 列 出 了 AppScan 的 所 有 测试 规则 ,可 以 
通过 上 面 的 分 组 下 拉 框 对 其 按照 不 同方 式 进行 分 组 以 方便 查看 。 

4) 配置 多 步骤 操作 

如 图 9-43 Bros ,对 于 复杂 应 用 ,要 完成 某 项 任务 往往 需要 很 多 步骤 ,步骤 之 间 有 很 强 
的 顺序 依赖 关系 。 我 们 知道 AppScan 会 测试 所 有 发 现 的 URL, 对 这 些 URL 的 测试 是 随 
机 的 , 它 并 不 能 保证 对 存在 依赖 关系 的 URL 的 测试 是 按照 顺序 的 ,这 就 可 能 造成 
AppScan 首先 访问 后 续 步 骤 页 面 ,从 而 影响 安全 测试 结果 。 为 了 解决 问题 ,AppScan 引入 
了 多 步骤 序列 的 概念 。 单 击 主 配置 面板 左边 的 多 步骤 操作 打开 多 步骤 操作 视图 ,此 视图 中 
列 出 了 所 有 已 经 创建 的 操作 序列 ,可 以 将 存在 的 序列 导出 成 单独 文件 ,也 可 以 导入 曾经 被 导 
出 的 序列 文件 ; 单 击 红 色 的 按钮 会 弹出 AppScan 内 置 的 浏览 器 ,在 此 浏览 器 中 用 户 只 需 像 
平时 使 用 应 用 一 样 完成 某 项 功能 即 可 ,关闭 浏览 器 即 完成 序列 脚本 的 录制 。 在 测试 过 程 中 ， 
AppScan 会 将 当前 待 测试 的 URL 与 录制 的 序列 脚本 中 的 URL 进行 比较 ,如 果 发 现 待 测 
URL 是 某 个 序列 中 的 一 步 ,AppScan 会 重 放 所 有 前 置 序列 脚本 以 使 对 当前 页 面 的 访问 
合法 。 


bd 9) 多 步 要 操作 
URL 和 服务 器 这 些 记录 的 多 步 圣 换 作 需要 按照 必定 顾 序 下 发 送 请 求 ， 才 能 连 报到 应 用 程序 的 某 些 部 分 。 
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图 9-43 配置 多 步骤 操作 
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9.2.3 Rational AppScan 扫描 结果 


Rational AppScan 扫描 结果 在 3 个 视图 中 显示 。 通 过 视图 选择 上 的 按钮 选择 视图 ( 默 
认为 问题 视图 )。 这 3 个 视图 中 显示 的 数据 会 随 选 择 的 视图 不 同 而 改变 ,如 表 9-1 所 示 。 


表 9-1 3 个 视图 的 显示 内 容 


安全 性 问题 | 


安全 
问题 


从 宏观 到 特定 的 请 求 /响应 显示 发 现 的 实际 问题 
应 用 树 : 完整 应 用 树 。 计 数 器 显示 每 一 项 所 发 现 的 问题 数 
结果 列表 : 显示 所 选 树 中 节点 的 问题 列表 。 显 示 问 题 的 优先 级 别 


am 详细 资料 栏 : 显示 在 结果 列表 上 所 选 问题 的 顾问 信息 、 修 改建 议 . 请 求 /响应 
修改 提供 一 个 修改 扫描 中 发 现 问题 的 详细 修改 意见 表 
| 工作 应 用 树 : 完整 应 用 树 。 计 数 器 显示 每 一 项 所 提供 的 修改 意见 数 
结果 列表 : 列 出 树 中 所 选 节点 的 意见 列表 。 显 示意 见 的 优先 级 别 
收复 任务 视图 


详细 资料 栏 : 显示 结果 栏 中 所 选择 修改 意见 和 详细 资料 和 问题 的 详细 分 析 


wis 


应 用 
数据 


显示 检查 执行 期 间 的 脚本 参数 、 交 互 的 URL ,访问 的 URL、 错 误 链接 、 过 滤 
URL È F Java 脚本 和 控件 

应 用 树 : 完整 应 用 树 

结果 列表 : 对 结果 列表 栏 上 面 可 选 列表 进行 过 滤 , 以 确定 显示 哪 一 项 的 详 
细 信 息 

详细 资料 栏 ; 结果 列表 中 所 选项 的 详细 信息 


严重 等 级 如 表 9-2 所 示 。 

结果 列表 会 显示 应 用 树 中 所 选择 节点 的 问题 ,这 些 可 以 是 : 基本 级 (显示 所 有 站 点 问 
题 ) 页 面 级 (显示 所 有 页 面 问题 ) 参数 级 (显示 所 有 特定 页 面 特定 请 求 的 问题 ) 。 

AppScan 给 每 一 个 发 现 的 问题 分 配 4 个 严重 等 级 中 的 一 个 。 


X92 严重 等 级 

@ 高 严重 级 别 

y 中 严重 级 别 

o 低 严重 级 别 

B 报告 安全 问题 

注意 : 这 一 类 只 适用 于 窗口 问题 。 在 修正 窗口 中 所 有 上 比 严重 级 别 低 的 都 属于 低 严重 级 别 

(9.3 ”案例 分 析 

9.3.1 项 目 背景 


1. 公司 及 产品 简介 


电讯 至 科 有 限 公 司 ( 简 称 电讯 一 科 ,PCCW) 是 一 家 注册 于 中 国 香港 的 大 型 企业 集团 ,是 
中 国 香港 最 大 的 电讯 运营 商 。 电 讯 青 科 企业 方案 是 电讯 到 科 集团 信息 技术 和 业务 流程 外 包 
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服务 的 旗舰 品牌 。 拥 有 3800 名 资深 ICT 专 才 , 在 中 国 香港 .北京 .上海 .广州 深圳、 武汉 和 
西安 等 地 均 设 有 分 支 机 构 。 
电讯 树 科 (PCCW) 的 维修 管理 信息 系统 (MMIS) 产 品 已 经 成 功 应 用 于 交通 运输 行业 。 
1) 系统 平台 架构 
PCCW MMIS 系统 平台 架构 如 图 9-44 所 示 。 


开发 工作 站 数据 库 服务 器 
人 


外 
开发 团队 415 


t 


负载 均衡 服务 器 


图 9-44 系统 平台 架构 


2) 系统 功能 架构 
PCCW MMIS 系统 功能 架构 如 图 9-45 所 示 。 


图 9-45 系统 功能 架构 


3) 系统 主要 功能 框架 
PCCW MMIS 系统 主要 功能 框架 如 图 9-46 所 示 。 


2. 主要 功能 
电讯 恒 科 (PCCW) 的 维修 管理 信息 系统 (MMIS) 通 过 优化 维护 资源 ,改善 设备 及 员工 
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图 9-46 系统 主要 功能 框架 


生产 力 ,提高 库存 效率 ,增强 执行 保修 合同 的 能 力 ,为 列车 服务 企业 节省 时 间 和 人 金钱。 通过 
MMIS, 用 户 能 : 

(1) 注册 、 跟 踪 并 分 析 整 个 生命 周期 内 的 企业 资产 。 

(2) 为 企业 资产 的 周期 性 维护 ,灵活 建立 大 量 计划 。 

(3) 运用 工 单 模 组 ,监控 各 种 维护 工作 。 

(4) 通过 获取 工 单 上 准确 的 劳务 成 本 及 物料 支出 ,分 析 \ 优 化 维护 工作 成 本 。 

(5) 通过 维修 计划 ,预测 采购 需求 。 

(6) 通过 供应 商 询 价 管理 ,控制 采购 成 本 。 

(7) 通过 库存 管理 ,提高 库存 效率 ,降低 库存 成 本 。 

MMIS 在 高 阶 上 划分 成 13 个 模块 。 它 们 分 别 为 设备 管理 ,维护 管理 \ 工 单 管理 ,采购 管 


理 、 库 存 管理 .报表 分 析 、 文 档 管理 ,合同 管理 ,流程 管理 ,安全 管理 ,组 织 管理 、 系 统管 理 及 个 
人 门户 管理 ,如 图 9-47 所 示 。 
1) 设备 管理 


设备 管理 模块 用 于 维护 与 设备 相关 的 基础 信息 ,例如 设备 登记 ,设备 类 别 、 位 置 . 设 备 架 
构 、 设 备 结构 定义 以 及 设备 安装 / 拆 务 管理 等 。 

设备 管理 模块 所 有 业务 数据 除了 提供 手工 录入 ,也 支持 批量 上 传 及 下 载 。 

设备 管理 模块 包括 运营 机 电 设备 的 维护 管理 ,也 包括 车 辆 设备 的 维护 管理 。 

仪表 管理 提供 创建 用 于 设备 计划 检修 或 状态 检修 的 仪表 .记录 设备 运行 数据 ,状态 数据 
的 功能 ,从 而 为 设备 的 计划 检修 或 状态 检修 提供 依据 。 

设备 管理 模块 提供 检修 器 具 台 账 的 创建 与 管理 功能 ,支持 对 检修 器 具 进行 定期 检修 计 
划 , 以 及 员工 器 具 配置 、 领 用 ,归还 等 管理 功能 。 

2) 维护 管理 

维护 管理 包含 预防 性 维修 故障 性 维修 和 状态 性 维修 3 类 ,用 户 可 根据 不 同类 计划 的 特 
点 ,现实 业务 需求 ,对 不 同 设备 类 型 进行 科学 、 合 理 的 计划 编排 。 同 时 ,系统 能 根据 时 间 自 动 


第 9 章 “性 能 测试 工具 与 安全 测试 工具 


一 设备 管理 imum neus den 
fee] em] = E mm 
I EEC I LL | 
i : Lawes ] [ ruwa ] 

; [设备 仪表 设备 结构 i "ei 1 
: i arama | [ seem | 
i 设 务 基础 信息 | [ #snw | 计划 工作 各 i mee | [ sane | 
采购 订单 
EM 
供应 商 管理 n 
œ 
LLLLI 
仆人 门户 管理 ia 
LJ 
mz 
[annt] 


图 9-47 系统 模块 结构 图 


提醒 计划 编制 人 员 即 将 到 期 的 计划 工作 ,还 可 支持 手动 和 自动 创建 模板 ,然后 用 户 填写 数 
据 , 自 动 上 传 到 系统 。 

预防 性 维修 管理 是 企业 实行 设备 预防 维修 ,保持 设备 状态 经 常 完 好 的 具体 实施 计划 ,其 
目的 是 保证 企业 生产 计划 的 顺利 完成 。 

预防 性 维修 管理 工作 主要 包括 根据 当前 产品 及 新 产品 对 设备 的 技术 要 求 和 设备 技术 劣 
化 程度 ,编制 设备 维修 计划 并 认真 组 织 实施 。 在 保证 维修 质量 的 前 提 下 ,完成 维修 计划 , 缩 
短 停 修 时 间 和 降低 维修 费用 。 

3) 工 单 管理 

工 单 管理 是 通过 工 单 ,解决 计划 性 的 、 非 计划 性 的 维修 工作 .把 复杂 、 庞 大 的 维修 工作 细 
分 ,有 阶段 有 计划 地 逐步 完成 。 

工 单 管理 包含 工作 内 容 、 工 作 要 求 ,还 包含 资金 预算 信息 ,需要 的 物料 信息 、 相 关 的 项 目 
信息 ,是 工作 流 、 资 金 流 和 物流 结合 在 一 起 的 载体 ,也 是 将 采购 和 库存 连接 起 来 的 一 个 桥梁 。 
系统 运行 采用 多 种 标准 生产 工 单 , 包 括 基 于 时 间 频 率 和 基于 度量 的 ,还 可 以 根据 站 点 、 测 量 
点 等 生成 工 单 。 

工 单 管理 包括 工 单 .工作 请 求 .工时 表 和 事件 。 

4) 采购 管理 

采购 管理 处 于 资产 生命 周期 的 获取 阶段 ,主要 包括 设备 的 采购 申请 、 采 购 订单 管理 、 采 
购 计划 管理 .供应 商 及 询 价 管理 、 发 票 管理 等 。 

好 的 采购 要 做 到 5 个 恰当 : 恰当 的 数量 .恰当 的 时 间 、 恰 当 的 地 点 .恰当 的 价格 和 恰当 
的 来 源 。 采 购 策略 的 正确 选择 是 做 好 采购 工作 的 前 提 。 
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5) 库存 管理 

库存 管理 模块 主要 包括 物资 信息 管理 仓库 管理 .库存 事务 处 理 、. 库 存 成 本 管理 及 库存 
动态 查询 等 。 

6) 合同 管理 

合同 管理 模块 提供 对 企业 运营 和 维护 活动 相关 的 合同 进行 维护 管理 的 功能 ,如 合同 分 
类 ,合同 创建 ,合同 审批 ,合同 修订 、 合 同 审批 等 。 

合同 管理 对 计划 和 建设 部 门 、 财 务 部 门 也 是 相当 重要 的 一 环 ; 可 实现 合同 信息 被 相关 
部 门 共享 ,查阅 ,存档 。 

7) 文档 管理 

文档 管理 可 以 让 用 户 多 路 同时 存 取 、 更 加 安全 的 访问 控制 、 更 容易 搜索 与 查阅 、 审 计 记 
录 查 询 , 有 效 的 版 本 控制 .没有 实际 空间 存储 问题 和 损毁 问题 ,文件 保持 与 跟 进 措施 的 提醒 、 
向 无 纸 化 办 公 发 展 。 

文档 管理 模块 支持 多 种 格式 的 文档 管理 ; 支持 文档 流程 化 审批 ,流程 可 以 依据 企业 业 
务 和 组 织 的 变化 而 进行 修改 ; 更 严密 的 安全 访问 控制 有 益 于 预防 未 经 授权 的 访问 ; 管理 文 
档 的 不 同 授 权 级 别 ; 支持 文档 的 版 本 控制 ,文档 版 本 的 控制 能 保证 文档 的 准确 性 、 唯 一 性 和 
现时 有 效 性 ; 支持 文档 的 关联 ,能 将 文档 与 设备 、 工 单项 目 等 关联 ,利于 企业 的 信息 共享 。 

8) 报表 分 析 

报表 管理 能 够 随时 让 用 户 全 面 、 清 晰 、 直 观 地 了 解 企业 业务 总 体 及 细节 运作 状况 。 其 良 
好 的 报表 管理 能 显著 提高 报表 传输 和 共享 的 效率 ,并 且 降 低 报表 的 相关 费用 , 低 成 本 地 为 公 
司 领导 的 决策 进行 有 力 的 支持 。 

9) 流程 管理 

流程 管理 模块 为 用 户 提供 定制 工作 流 、 查 看 系统 分 派 任 务 的 功能 。 

利用 流程 管理 模块 提供 的 流程 设计 器 ,可 以 针对 工 单 流程 、 工 作 请 求 流程 .文档 审批 流 
程 等 进行 客户 化 定制 。 

10) 安全 管理 

系统 提供 对 用 户 账户 、 用 户 角色 和 访问 权限 等 功能 的 管理 。 每 个 用 户 都 具有 独特 的 身 
份 进 入 系统 。 这 些 功 能 对 于 系统 的 安全 性 是 必 不 可 少 的 ,特别 是 对 认证 和 授权 。 系 统 利用 
用 户 账号 实行 认证 ,利用 角色 和 访问 组 ,字段 权限 组 等 实行 授权 。 

11) 组 织 管理 

组 织 是 工作 组 和 个 人 的 群 组 , 它 拥 有 多 层 的 架构 。 例 如 ,可 能 会 有 3 层 的 组 织 : 公司 、 
部 门 及 室 。 室 从 属于 部 门 ,而 部 门 则 从 属于 公司 。 不 同 层 的 组 织 之 间 存 在 着 层级 关系 。 各 
个 组 织 可 以 有 数 个 工作 组 。 设 备 的 数据 访问 权限 、 工 单 或 其 他 相关 数据 将 会 指定 子 组 织 。 
权限 将 会 在 组 织 的 不 同 层 级 上 生效 。 

12) 系统 管理 

系统 管理 模块 提供 系统 参数 配置 .会 计 期 间 、 账 号 段 、 工 作 类 型 ,物料 信息 等 基础 数据 维 
护 功 能 ,主要 分 为 基础 数据 管理 、 系 统 参数 设置 和 批 处 理 任务 管理 。 

13) 个 人 门户 管理 

支持 个 性 化 的 设置 ,针对 每 个 用 户 ,提供 其 个 人 使 用 的 工作 环境 和 访问 界面 ,用 户 可 以 
依照 个 人 日 常 操作 的 需要 和 习惯 ,选择 相关 栏目 ,设计 个 人 的 版 面 布局 ,将 门户 定制 成 个 人 
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的 工作 平台 ,进行 工作 进度 跟踪 、 查 看 报表 、KPI 指标、 设备 状态 等 工作 。 
14) 与 系统 的 接口 
PCCW MMIS 系统 主要 与 财务 系统 、HR 系统 等 进行 信息 交互 。 例 如 ,在 津 澳 地 铁 
MMIS 项 目 中 ,其 发 送 与 接收 的 接口 信息 如 表 9-3 所 示 。 
表 9-3 PCCW MMIS 系统 接口 表 


源 系统 目标 系统 数据 内 容 
GL 本 系统 账号 段 
FCS 本 系统 F1 Number 
INV 本 系统 物料 代码 单价、 可 用 数量 
HR 本 系统 员工 信息 
INV 本 系统 工 单 的 实际 物料 成 本 
AP 本 系统 工 单 的 实际 其 他 成 本 
本 系统 GL 工 单 的 实际 人 力 成 本 
本 系统 INV, PO, AP 工 单 号 
3. 产品 优势 


CD 电讯 盈科 既是 MMIS 产品 的 开发 商 ,又 是 实施 服务 的 提供 商 。 

产品 开发 商 与 实施 商 为 同一 家 公司 的 益处 ,有 以 下 几 点 。 

D 降低 成 本 ; 

© 增加 效率 ; 

© 提高 实施 质量 ; 

@ 更 能 贴近 用 户 需求 ,客户 化 定制 程度 较 高 ; 

© 降低 实施 风险 ,提高 成 功率 ; 

(& License 限制 比较 宽松 。 

(2) MMIS 产品 具有 以 下 独 有 的 价值 优势 。 

D 符合 国际 级 的 资产 管理 标准 (PAS-55); 

@ 融合 优秀 地 铁 公司 多 年 行 之 有 效 、 久 经 考验 的 业务 流程 和 成 功 的 资产 管理 经 验 ， 
© 结合 资深 顾问 服务 ,面向 铁路 运营 单位 ,针对 轨道 交通 业务 为 核心 的 优化 方案 ; 
@ 满足 铁路 RAMS 的 要 求 ; 

© 对 轨道 等 连续 性 设备 的 有 效 管理 ; 

能 和 其 他 系统 无 缝 集成 ; 

CD 简单 易 用 、 直 观 友 好 的 用 户 界面 ,支持 多 语言 ; 

@ 先进 的 信息 技术 、 业 界 标准 和 开放 的 平台 ,有 足够 的 灵活 性 及 可 扩展 性 ; 

@ 易于 实施 ,降低 实施 风险 和 成 本 。 


4. 实施 方法 


电讯 盘 科 在 中 国 铁路 实施 信息 系统 及 相关 业务 系统 已 有 多 年 ,对 资产 核算 .全 生命 周期 
资产 管理 等 业务 有 较 深 理解 。 在 本 项 目 之 前 ,电讯 盈科 已 在 部 分 铁路 公司 兄弟 省 份 建成 了 
与 本 项 目 需求 极为 类 似 的 业务 模块 /系统 。 因 此 ,对 于 本 项 目的 建设 ,我 方 将 根据 铁路 关于 
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资产 全 生命 周期 管理 实施 项 目的 标书 要 求 ,结合 此 前 的 业务 咨询 和 系统 建设 规划 成 果 ,充分 
利用 电讯 僵 科 为 其 他 铁路 公司 的 建设 成 果 , 进 行 有 机 整合 ,迅速 、 准 确 地 开发 出 满足 要 求 的 
系统 ,并 完成 项 目 实施 任务 。 进 行 项 目 实施 所 遵循 的 方法 论 如 图 9-48 所 示 。 

电讯 僵 科 快速 实现 了 全 球 公 认 最 佳作 业 的 港 铁 资 产 维修 流程 和 方案 ,使 其 拥有 了 一 整 
套 功 能 强大 并 符合 地 铁 行业 特点 的 系统 ,提高 了 业务 效益 ; 快速 实施 低 成 本 低 风 险 的 世界 
级 的 系统 ,更 避免 了 实施 ERP 软件 所 需 的 昂贵 客户 化 定制 和 咨询 顾问 服务 费用 ; 用 最 低 的 
总 成 本 ,使 客户 拥有 一 套 由 经 验 丰 富 的 地 铁 资产 管理 专家 设计 、 直 观 易 用 、 开 放 技 术 平 台 的 
资产 管理 系统 。 

系统 实施 涉及 的 阶段 如 下 : 项 目 定义 阶段 、 项 目 设计 阶段 、 项 目 构架 阶段 、 项 目 转换 阶 
段 及 项 目 运行 阶段 。 每 一 个 轮 次 的 CRP 或 者 UAT, 均 需 经 历 如 下 环节 : 案例 准备 或 调整 、 
环境 准备 ,数据 准备 .数据 导入 ,测试 .问题 日 志 回 顾 、 问 题 处 理 , 软 件 发 布 总 结 等 。 
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图 9-48 项 目 实施 方法 论 
ik: CRP 即 会 议 室 导航 ,用 于 帮助 项 目 组 建立 业务 流程 模型 。 通 过 CRP 还 可 发 现 软件 与 现实 的 差异 ,并 进一步 调 
整 软件 配置 。 


电讯 鳃 科 对 项 目 所 涉及 的 管理 与 控制 包括 项 目 计 划 、 项 目 状态 报告 (周报 、 月 报 )、 问 题 
管理 .变更 管理 ,配置 管理 质量 管理 ,风险 管理 ,关联 管理 项 目 跟 踪 及 监控 。 

项 目 组 成 员 在 项 目 过 程 中 ,将 所 有 问题 记录 在 问题 日 志 中 ,由 电讯 僵 科 项 目 经 理 或 其 代 
理 统 一 记录 ,更 新 和 跟 进 。 

问题 日 志 包 括 如 下 内 容 : 问题 提出 时 间 、 问 题 描 述 、 优 先 级 、 问 题 提出 人 、 问 题 处 理 负责 
人 问题 状态 (如 : 未 解决 、 正 在 解决 .已 关闭 .已 取消 )。 当 一 个 问题 解决 后 ,相关 的 项 目 组 
成 员 要 通知 电讯 鳃 科 项 目 经 理 .更 新 相应 的 问题 状态 和 必要 的 信息 、 问 题 的 解决 方法 、 问 题 
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的 解决 时 间 。 

对 于 需要 变更 的 内 容 , 需 对 其 进行 控制 ,履行 必要 的 复核 手续 ,并 加 以 标示 和 报告 。 如 
果 关 系 到 项 目 成 本 和 关键 里 程 碑 的 变动 ,需要 得 到 项 目 指导 委员 会 的 批准 。 

系统 上 线 前 ,电讯 一 科 负 责 配 置 库 清单 的 更 新 ,配置 库 清单 的 格式 按照 甲 方 客户 的 信息 
系统 项 目 管理 方法 。 上 线 后 ,将 配置 库 清单 提交 给 甲 方 客户 。 

通过 对 项 目的 风险 进行 识别 ` 分 析 , 并 采取 必要 的 纠正 或 预防 措施 来 降低 风险 。 

北京 津 澳 地 铁 有 限 公 司 是 一 个 致力 于 地 铁 建设 .运营 ,管理 的 专业 化 公司 。 公 司 是 在 北 
京 市 加 大 基础 设施 投资 体制 改革 力度 的 历史 条 件 下 ,由 北京 市 基础 设施 投资 有 限 公司 ,北京 
首都 创业 集团 有 限 公司 和 中 国 香港 铁路 有 限 公 司 共 同 出 资 组 建 。 该 公司 采用 的 EAM 系统 
即 是 电讯 盈科 提供 的 MMIS 产品 ,主要 用 于 对 车 辆 及 设备 进行 科学 管理 ,对 维护 维修 活动 
做 出 合理 安排 ,以 提高 设备 有 效 使 用 率 。 系 统 主要 的 功能 包括 设备 管理 ,维护 计划 管理 、 工 
作 管 理 、 预 算 和 报 备 、 系 统管 理 等 。 

2008 年 7 月 ,电讯 僵 科 承接 津 澳 地 铁 有 限 公司 的 设备 维护 管理 信息 系统 (MMIS) 的 开 
发 与 实施 项 目 。 根 据 合 同 要 求 , 需 要 在 上 线 前 对 该 系统 进行 压力 测试 。 


9.3.2 RPT 和 LR 的 对 比分 析 


首先 ,进行 MMIS 系统 压力 测试 面临 的 工作 是 压力 测试 工具 的 选 型 问题 ,目前 市 面 上 
比较 流行 的 两 种 性 能 /压力 测试 工具 是 IBM Rational Performance Tester( 简 称 RPT) 和 
HP Mercury LoadRunner( 简 称 LR). 

我 们 知道 ,LoadRunner 是 一 种 适用 于 各 种 体系 架构 的 自动 负载 测试 工具 ,通过 模拟 实 
际 用 户 的 操作 行为 和 实施 实时 性 能 监测 ,来 帮助 用 户 排查 和 发 现 问题 。 相 比 于 RPT,LR 能 
支持 更 广泛 的 协议 和 技术 ,适应 面 很 广 ,为 用 户 的 特殊 环境 提供 特殊 的 解决 方案 。LR 的 组 
件 很 多 ,其 中 最 核心 的 组 件 包括 以 下 儿 个 。 

(1) Vuser Generator(VuGen) 用 于 捕获 最 终 用 户 业 务 流程 和 创建 自动 性 能 测试 脚本 。 

(2) Controller 用 于 组 织 .驱动 .管理 和 监控 负载 测试 。 

(3) Load Generator( 负 载 生 成 器 ) 用 于 通过 运行 虚拟 用 户 生 成 负载 。 

(4) Analysis 用 于 查看 .分 析 和 比较 性 能 结果 。 

RPT 也 是 一 款 性 能 测试 工具 ,适用 于 基于 Web 的 应 用 程序 的 性 能 和 可 靠 性 测试 ,将 易 
用 性 与 深入 分 析 功 能 相 结合 ,从 而 简化 了 测试 创建 .负载 生成 和 数据 收集 ,以 帮助 确保 应 用 
程序 具有 支持 数 以 千 计 并 发 用 户 并 稳定 运行 的 性 能 。 

CD RPT 是 针对 Web 应 用 程序 的 性 能 测试 工具 ,基于 Windows 和 Linux 的 用 户 界面 ， 
使 用 基于 树 状 结构 的 测试 编辑 器 提供 高 级 且 详 细 的 测试 视图 。 

(2) 提供 不 同 用 户 数 的 灵活 的 模拟 ,支持 将 Windows 和 Linux 用 作 分 布 式 负载 生成 
器 ,使 用 最 小 化 的 硬件 资源 实现 大 型 .多 用 户 的 测试 。 

G) 支持 使 用 自 定义 Java 代码 的 灵活 测试 定制 。 

下 面 主要 从 脚本 开发 .场景 构建 与 配置 .性 能 监控 测试 结 果 分 析 4 个 方面 对 RPT 和 
LR 这 两 个 性 能 /压力 测试 工具 的 使 用 进行 详细 的 对 比分 析 , 并 根据 实践 经 验 总 结 RPT 的 
一 些 实用 技巧 。 更 多 的 了 解 和 学 习 可 以 访问 其 相关 网 站 。 
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1. 脚本 开发 对 比 


LR/RPT 的 脚本 的 开发 过 程 通常 都 是 采用 录制 十 定制 的 模式 。 首 先 通过 对 典型 业务 
逻辑 的 录制 ,完成 脚本 中 的 基本 业务 的 框架 ,然后 针对 录制 结果 ,通过 参数 化 、 数 据 关 联 、 增 
加 逻辑 控制 等 方式 加 强 脚 本 的 适应 性 来 满足 特殊 的 业务 需求 。 

1) 脚本 录制 /定制 过 程 

(1) LR: 直接 生成 面向 过 程 的 运行 代码 。 

LR 通过 对 基本 业务 的 录制 ,VuGen 将 生成 Vuser 函数 (也 称 作 LR APD ,并 将 它们 插 
入 到 脚本 中 。 在 实践 中 ,LR 脚本 就 是 由 这 样 的 Vuser 函数 和 一 些 定制 代码 组 成 的 。 对 于 
基于 Web(HTTP/HTML) 的 应 用 程序 的 测试 ,多 数 用 户 选择 基于 C 语言 的 LR 脚本 , 显 
然 ,这 种 LR 脚本 是 一 种 面向 过 程 的 脚本 ,开发 者 可 以 对 最 终 运行 的 脚本 进行 直接 的 修改 与 
调整 。 对 于 开发 者 来 说 ,这 种 LR 脚本 的 开发 方式 比较 灵活 。 相 应 地 ,这 项 工作 ,对 于 开发 
者 的 编程 基础 ,尤其 是 C 语 言 和 LR API 的 了 解 ,要 求 都 比较 高 。 

(2) RPT: 录制 结果 经 过 “翻译 ”生成 最 终 的 运行 代码 。 

与 LR 不同 ,RPT 的 脚本 录制 过 程 可 以 拆 分 成 两 步 。 如 图 9-49 所 示 , 第 一 步 , RPT 
Recorder on RAC 负责 记录 用 户 的 所 有 HTTP 请 求 ,生成 一 系列 的 Trace 文件 。Trace 文 
件 记录 了 用 户 与 服务 器 的 交互 过 程 。 第 二 步 , 当 用 户 完 成 脚本 的 录制 过 程 之 后 ,RPT Test 
Generator 能 够 根据 Trace 文件 “翻译 一遍, 生成 最 终 运 行 的 测试 脚本 。 


Internet Explorer SOCKS KE asa) HTTP Web 
> ` ` onRAC 
encoded Server 


HTIP 


RPT Test 


图 9-49 RPT 脚本 的 录制 和 生成 架构 


这 种 生成 临时 Trace 文件 的 好 处 是 用 户 可 以 随时 依据 该 Trace 文件 生成 新 的 测试 脚 
本 ,然后 再 对 脚本 进行 测试 场景 定制 ,而 不 用 对 同一 个 操作 过 程 做 多 次 录制 操作 。 

2) 参数 化 

录制 业务 流程 时 ,LR/RPT 生成 一 个 包含 录制 期 间 用 到 的 实际 值 的 脚本 。 假 设 用 户 要 
使 用 不 同 于 录制 内 容 的 值 执 行 该 脚本 的 操作 时 ,就 需要 用 参数 蔡 换 已 录制 的 值 ,这 被 称 为 脚 
本 参数 化 。 脚 本 的 参数 化 可 以 简化 脚本 ,同时 增强 脚本 适用 性 。 对 于 LR 和 RPT 脚本 , 参 
数 化 过 程 类 似 , 都 是 定义 参数 ,为 参数 指定 属性 或 者 数据 源 的 过 程 。 但 是 在 LR rh. HU K 
数 中 的 参数 才能 参数 化 , 除 此 之 外 ,其 他 字符 串 不 能 进行 参数 化 。 

RPT 的 参数 化 过 程 同 样 简单 (以 替换 用 户 登 录 密码 为 例 来 说 明 ) ,首先 ,选中 需要 进行 
参数 蔡 换 的 请 求 页 面 , 如 图 9-50 所 示 , 选 中 左 侧 的 登录 请 求 页 面 。 在 其 右 侧 的 Test Data 中 
显示 与 该 请 求 页 面相 关 的 所 有 数据 信息 ,脚本 录制 人 员 可 以 用 其 他 值 代 蔡 图 9-50 中 的 
password 变量 。 

3) 数据 关联 

数据 关联 类 似 于 参数 化 ,可 以 简化 脚本 ,适应 企业 应 用 中 需要 动态 数据 的 情况 。 默 认 情 


第 9 章 ”性 能 测试 工具 与 安全 测试 工具 


Performance Test - Workflow_launch 
Test Contents Test Element Details 
This section shows the test contents. Browse. 
E $$ worifiow aunch ^ Thrktme: — [10000 — miseconds (Mj 4 
5$ Q. Test Variables Ce] Test Data 
$ à spn Ur 
aa boss; Tu Mane Vale Substkuted wth 
a [Š Browse (1) beowserOffset1 480 
i$ [À Browse (2) : browserOffset2 -480 
S [Ó wp, gethtriorm (1) w x ° 
DA wp_getHtmiForm Dom Y ° 
D D wesp_ostrtmiForm (2) userid formt 
田园 wésp_getHtmiFom {2} Ce browserme2 Fri Jun 15 20.. 
a [Ó weso_getrtmForm (2) bowseTmel Mon Jan 1 2. 
S 因 wwp_getktmiForm (2) Cee) 
tha P| 
p DÀ. wnrtnbvn: Frirv Tri = — 


BI 9-50 RPT 脚本 参数 化 


况 下 ,LR 和 RPT 都 能 做 到 一 些 基本 的 数据 关联 ,但 是 由 于 HTTP 请 求 之 间 关 联 的 复杂 性 ， 
需要 用 户 手动 做 一 些 数据 关联 。 数 据 关联 包含 3 个 步骤 ,一 是 定义 哪个 录制 的 值 需要 被 关 
联 (替换 ); 二 是 定义 数据 源 ; 三 是 定义 被 关联 的 数据 与 数据 源 之 间 的 关联 关系 。 

LR 的 数据 关联 过 程 如 下 : lr_save_XXXX(value,dataSource) 语 句 将 数据 源 的 值 保存 
到 参数 dataSource rB; 用 lr_eval_XXXX(CdataSource) 语 句 替 换 被 关联 的 数据 。 

RPT 中 如 果 需 要 自己 定义 关联 , 则 在 HTTP 请 求 中 的 URL 中 或 者 Data 中 选择 需要 
创建 关联 的 部 分 ,然后 右 击 选择 替换 对 象 。 其 中 , 蔡 换 对 象 可 以 是 脚本 中 已 经 建立 的 引用 
(这 里 的 引用 就 是 一 种 用 户 自 定义 的 数据 源 ) ,或 者 RPT 自 带 的 数据 源 ( 例 如 时 间 戳 对象 ) ， 
或 者 是 Custom Code。 

图 9-51 中 浅 色 的 部 分 是 已 经 被 关联 的 URL ,运行 测试 时 该 部 分 将 由 被 引用 的 URL fii 
来 替换 。 


Test Contents Test Element Details 
This section shows the test contents wpfcn02.cn.ibm.com:10038/wp* 
= —— z9CPOos3g f6N Rxc 
E submit viewer Add BDdxRifbhcTiG4DHMDRQAK7LYL 
B-A. Frsturl IPMgHRHRUUAG7QRAIId2/d1, 
H-A. Login Insert | EFEQzAyNkhLUThLQzI4QTE! 
H-A. Document Request Attributes 
EHA. ClickFolder —— version: [1.1 ] Method: [GE 
= a vipícn02.cnibm.com:10038/wps /myport —— 
E) Transaction: CickFolder_Trans = Host: wofcnO2.cn.bm.cor 
EHA. OpenForm. Down URL: |jJutjp) 
| | 一 @@ Custom code: test.Class1177740437593 idna y 
| E É Transaction: OpenForm. Trans. rm zen 
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4) Custom Code 

Custom Code 是 RPT 独 有 的 概念 。 尽 管 RPT 脚本 开发 过 程 中 ,用 户 可 以 直接 在 UI 层 
面 达到 对 脚本 的 定制 ,但 是 这 种 定制 能 力 毕竟 有 限 。 将 定义 好 的 Custom Code 通过 UI 穿 
插 到 脚本 中 ,为 RPT 录制 的 脚本 提供 充足 的 扩展 能 力 来 保证 其 灵活 的 定制 性 。Custom 
Code 本 质 上 就 是 一 个 Java 类 。Custom Code 需要 实现 com. ibm. rational. test. lt. kernel. 
custom. ICustomCode2 接口 ,并 实现 该 接口 中 的 如 下 方法 : 


public String exec( ITestExecutionServices tes, String[] args) 
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ITestExecutionServices tes 参数 是 Test Container 中 的 一 个 实例 ,使 用 它 可 以 访问 
Test Container 运行 态 的 一 些 服务 。 

String[ ] args 参数 是 定义 Custom Code 时 传人 的 参数 数组 。 

该 方法 的 主体 就 是 基于 传人 的 信息 进行 业务 逻辑 处 理 代 码 ,然后 将 处 理 结果 (一 个 字符 
串 ) 返 回 , 其 返回 的 字符 串 可 以 被 后 续 的 请 求 引 用 。Custom Code 是 一 个 纯 Java 的 类 ,所 以 
具有 Java 编程 经 验 的 人 都 可 以 根据 业务 需求 编写 自己 的 Custom Code, 

5) 数据 池 

性 能 /压力 测试 过 程 中 ,通常 都 需要 为 某 些 测试 提供 大 量 的 测试 数据 。LR 和 RPT 都 
提供 了 数据 池 功 能 ,即将 一 个 数据 文件 作为 参数 值 赋 给 一 个 参数 ,如 图 9-52 所 示 。 


= This section shows the test contents. Format. 
8 arem Ce we eu pani 
5$ Q. Test Varables Test Data. 
BB Werlece Foma sever Sanges — [vet ) r3 Vis uam  Sbei/ed wh 
ibo mew) | etu. 0973.. Oota Po.. Ë, -BOTES9IDO 


图 9-52 RPT 数据 池 


LR 中 ,用户 可 以 指定 该 文件 的 多 个 数据 以 何 种 方式 赋值 到 该 参数 中 。LR 提供 3 种 选 
择 : 顺序 ,随机 ,唯一 。 前 两 种 比较 容易 理解 ,最 后 一 种 是 指 每 个 虚拟 用 户 都 从 该 文件 中 取 
不 同 的 值 作为 参数 值 ,如 果 该 数据 池 不 足够 大 ,所 有 的 备 选 值 都 已 经 被 取出 过 一 次 , 即 该 数 
据 池 资源 被 用 尽 时 ,LR 报错 。 

在 RPT 中 ,用 户 只 能 顺序 从 数据 池 中 读 入 测试 数据 。RPT 的 数据 池 是 以 . XML 格式 
存储 的 ,并 且 在 测试 开始 时 ,将 数据 池 中 的 所 有 数据 都 加 载 到 内 存 中 ,这 样 的 实现 模式 不 利 
于 测试 中 使 用 大 数据 量 。 不 过 灵活 的 Custom Code 功能 可 以 弥补 这 方面 的 不 足 。 对 于 大 
量 的 测试 数据 ,可 以 通过 自 定义 Custom Code 来 实现 On Demand 的 数据 读 取 和 加 载 。 

6) 流程 控制 

LR 脚本 大 部 分 是 基于 C 语言 的 .因此 C 语言 中 的 流程 控制 语句 (例如 判断 ,循环 等 ) 都 
可 以 加 入 到 LR 脚本 中 。RPT 的 流程 控制 操作 可 以 通过 UI 界面 轻松 进行 , 它 提供 了 灵活 
的 流程 控制 模式 ,包括 TF 条 件 控制 结构 和 LOOP 循环 结构 。 

CD 下 条 件 控 制 结构 

在 RPT 脚本 中 ,可 以 将 一 部 分 连续 的 页 面 或 者 HTTP 请 求 放 到 一 个 下 条 件 中 , 然 
后 由 判断 条 件 来 确定 iF 结构 中 的 页 面 或 者 HTTP 请 求 是 否 被 执行 。 其 判断 条 件 可 以 
是 RPT 自动 参数 化 后 的 参数 ,也 可 以 是 Custom Code 的 返回 值 ,或 者 是 数字 、 字 符 
B, 

图 9-53 是 添加 了 iF 条 件 后 的 脚本 ,包含 为 下 语句 设置 判断 条 件 的 配置 界面 。 

同样 ,RPT 也 支持 iF-ELSE 的 结构 。 
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Test Contents Test Element Details 
This section shows the test contents Conditional(IF) Block 
X Forms WFS Cmm) Condition: 
由 -加 . IBM WebSphere Portal Type text to compare or select a data source object. 
X Logn Den ] Frstoperand: [Custom code: test Fiag 
|à. Documents 
Gà eame Management [Eee Selected data type: © Custe 
Canas ooer: 
REI — Pe a 
Bee pf Dos e ———— 
E. Small Form Coe) Selected data type: Aa text Y 
rh [h =. FF 一 一 一 一 


图 9-53 RPT iF 条 件 控制 结构 


(2) LOOP 循环 结构 

RPT 中 的 另外 一 种 流程 控制 结构 就 是 LOOP 结构 ,如 图 9-54 所 示 脚 本 中 ,将 所 有 的 页 
面 放 到 了 一 个 LOOP 结构 中 ,然后 可 以 通过 指定 循环 次 数 来 确定 其 中 的 脚本 循环 执行 多 
少 次 。 


Test Contents Test Element Details 

This section shows the test contents Loop (1 terabons) 

= i wanaq CE "eza [— — — — — 31 
S O, Test Variables. Cu) 
s O| [mS] mousse 


@ £j. Workplace Forms Server Samples. 
Hp [Eee opins 


图 9-54 LOOP 控制 结构 


7) 全 局 信息 

这 里 所 说 的 全 局 信息 ,实际 上 是 脚本 运行 时 ,LR/RPT 产生 的 内 部 数据 。 例 如 ,当时 的 
运行 时 间 ,Vu 所 在 用 户 组 组 名 ,迭代 编号 等 。 在 LR 中 ,所 有 的 全 局 信息 作为 特殊 的 参数 类 
型 , 供 脚 本 开发 者 使 用 。 例 如 ,如 果 一 个 变量 为 Group Name 类 型 , 则 该 变量 的 值 即 为 当前 
用 户 所 在 的 用 户 组 的 组 名 。 

RPT 中 的 全 局 信息 ,存在 IDataArea 对 象 中 。IDataArea 对 象 包含 3 个 方面 的 信息 ,分 
别 是 Test Data, Virtual User Data, Engine Data, 这 些 信息 都 可 以 通过 Custom Code 来 
获得 。 

Custom Code 的 实现 需要 继承 ICustomCode2 类 ,并 实现 该 接口 的 核心 方法 public 
String exec(ITestExecutionServices tes. String[ ] args) ,该 方法 的 第 一 个 参数 就 可 以 获得 
IDataArea 对 象 , 然 后 获得 全 局 信息 。 同 时 用 户 也 可 以 向 IDataArea 对 象 中 添加 信息 ,提供 
给 测试 脚本 的 其 他 地 方 使 用 。 

8) 错误 控制 

LR 用 户 可 以 指定 脚本 执行 期 间 的 错误 的 处 理 方法 。 默 认 情况 下 , 当 脚本 执行 出 现 错 
误 ,脚本 将 退出 执行 。 用 户 也 可 以 配置 运行 设置 指示 当 Vuser 出 现 错误 时 仍 继续 执行 脚 
本 。 除 此 之 外 ,用 户 还 可 以 在 脚本 中 加 入 Ir error. message 函数 ,便于 对 日 志 的 分 析 。 

RPT 中 , 当 脚 本 运行 出 现 错误 ,脚本 将 继续 执行 ,可 能 后 续 会 出 现 很 多 错误 。 
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9) Debug 

LR VuGen 可 用 作 常 规 文本 编辑 器 。 可 以 在 其 中 打开 任何 文本 文件 并 进行 编辑 。 当 重 
播 期 间 在 输出 窗口 中 显示 错误 消息 时 ,可 以 双击 该 错误 消息 ,VuGen 将 使 光标 跳 到 导致 问 
题 的 测试 行 。 还 可 以 将 光标 置 于 错误 代码 上 并 按 Fl 键 ,查看 该 错误 代码 的 联机 帮助 。 

RPT 在 运行 完 一 个 测试 之 后 ,会 产生 相应 的 测试 日 志 ,如 果 在 测试 过 程 中 发 生 任何 错 
误 ,RPT 会 以 Message 的 形式 提示 出 该 请 求 发 生 错误 。 如 图 9-55 所 示 的 测试 日 志 中 被 选 
中 的 Message 表示 该 HTTP 请 求 在 引用 前 面 的 关联 值 时 发 生 错误 。 
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Æ 9-55 RPT 错误 日 志 


2. 场景 构建 与 配置 对 比 


脚本 只 是 定义 了 某 些 用 户 的 操作 步骤 ,而 场景 则 包含 有 关 如 何 模拟 实际 用 户 的 所 有 信 
息 。LR 和 RPT 的 场景 构建 过 程 比较 类 似 , 只 是 对 脚本 循环 的 控制 ,分 配 负载 生成 器 等 配 
置 上 咯 有 差别 。 

LR 中 ,Controller 组 件 负责 场景 的 创建 。 用 户 需要 在 一 个 场景 中 添加 一 个 或 多 个 脚 
本 ,并 为 每 个 脚本 分 配 相应 的 Vuser 组 。 然 后, 用户 可 以 为 每 个 Vuser 组 分 配 多 个 虚拟 用 
P! ,指定 模拟 该 用 户 组 的 负载 生成 器 。 图 9-56 中 ,负载 生成 器 即 为 本 机 , 即 负载 生成 器 跟 
Controller 是 同一 台 机 器 ,如 果 该 处 配置 成 其 他 计算 机 的 IP 地 址 ,那么 该 用 户 组 的 负载 模 
拟 将 由 其 他 计算 机 完成 。LR 中 不 能 通过 Controller 指定 一 个 脚本 执行 与 否 的 概率 ,但 是 可 
以 通过 C 语言 开发 ,完成 随机 调用 脚本 的 功能 。Runtime-Setting 包含 所 有 针对 该 场景 的 一 
些 附 加 配置 ,如 脚本 循环 次 数 等 待 时 间 、 网 络 模拟 等 。 


图 9-56 LR 场景 创建 
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RPT 中 测试 场景 是 通过 Schedule 来 组 织 的 。Schedule 通过 用 户 组 ,循环 控制 随机 选 
择 器 等 功能 部 件 来 组 织 测试 脚本 使 其 满足 实际 场景 。 用户 组 则 由 循环 控制 或 者 随机 选择 
器 ,再 加 上 测试 脚本 等 元 素 组 成 。 循 环 控制 用 来 控制 其 下 的 测试 脚本 需要 循环 执行 的 次 数 。 
随机 选择 器 是 为 了 实现 在 多 个 测试 脚本 中 随机 选择 一 个 来 执行 。 可 以 为 随机 选择 器 指定 权 
重 ,通过 权重 值 来 决定 在 多 个 随机 选择 项 中 某 项 被 随机 选中 的 概率 大 小 。 图 9-57 是 一 个 
RPT 创建 场景 的 例子 ,其 中 ,Schedule Element Details 提供 了 对 Schedule 的 丰富 配置 功 
能 ,与 LR 中 的 Run-Time 配置 功能 类 似 。 
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图 9-57 RPT 场景 创建 


RPT 的 负载 生成 器 配置 也 比较 简单 ,首先 选中 要 放 到 其 他 RPT 主机 上 进行 模拟 的 
User Group ,然后 在 其 配置 界面 中 选中 Run this group on the following locations, 在 其 中 添 
加 远 端 的 RPT 主机 信息 ,如 图 9-58 所 示 。 


Schedule contents Schedule Element Details 
This section shows the schedule contents. User Group 1 (100%) 
A YFomelo0sded (Cam) sm Demum: — 
S (use Group 1 (100%) Group sze 
有 O Loop (1 teration) w O Abschte: 
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Co) O Run this group on the local computer. 
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Ee O [ieme Hostname Directory T Ab... 
es o C NNNM 


图 9-58 RPT 负载 生成 器 配置 


3. 性 能 监控 功能 对 比 


LR 和 RPT 内 部 都 集成 了 一 些 实时 监控 器 ,RPT 可 以 对 事务 、Web、 系 统 、Web 应 用 服 
务 器 等 资源 进行 实时 监控 。LR 的 监控 范围 更 广泛 一 些 ,除了 上 述 资 源 之 外 ,还 可 以 对 网 
络 、 防 火 墙 \Web 服务 器 、 数 据 库 、ERP、Java 等 资源 进行 实时 监控 。 无 论 使 用 哪 种 测试 工 
具 , 在 自动 测试 过 程 中 的 任何 时 间 , 用 户 都 可 以 获知 系统 的 多 种 性 能 指标 的 当前 值 和 变化 
趋势 。 

在 一 个 测试 场景 中 ,用 户 需要 将 被 监控 的 服务 器 信息 加 入 到 资源 监控 列表 中 。LR 中 ， 
如 图 9-59 所 示 , 从 左 侧 资源 树 中 选择 资源 种 类 ,在 右 侧 对 应 资源 状态 显示 窗口 中 , 右 击 添加 
被 监控 的 服务 器 名 称 。 

RPT 中 ,如 图 9-60 所 示 , 用 户 需要 在 Schedule 的 配置 窗 中 的 Resource Monitoring 选 
项 卡 中 添加 需 监控 的 服务 器 。 
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图 9-59 LR 添加 被 监控 的 服务 器 信息 


Schedule Contents Schedule Element Details 
This section shows the schedule contents. XForms100Schedule. 
S Ac Wome (Cau) lm fEEEEEE E 


D-E User Group 1 (100%) 
Ë C Loop (2145999999 Rerations) || Insert | 
i100 


[ Bemove. 


[] Enatje resource monitoring 
Name | Hostname — Data Source 


CEJ Ce) kee) 
图 9-60 RPT 添加 被 监控 的 服务 器 信息 


4. 测试 结果 分 析 功 能 对 比 


LR 和 RPT 都 提供 了 测试 结果 的 多 种 图 表 以 及 图 表 之 间 的 和 至 加 效果 ,方便 用 户 分 析 测 
试 结 果 。LR 中 测试 结果 图 表 的 生成 由 Analysis 组 件 完成 。 默 认 情 况 下 ,用 户 可 以 直接 看 
到 测试 的 总 体 概要 分 析 、 否 吐 率 、 事 务 平均 响应 时 间 等 图 表 , 如 果 用 户 希 望 看 到 其 他 资源 的 
监控 图 ,可 以 通过 添加 图 表 完成 (图 9-61) 。Merge Graghs 可 以 帮助 用 户 将 同一 个 测试 结果 
中 的 多 种 资源 的 结果 进行 琶 加 (图 9-62) 。Cross Result 可 以 生成 多 次 测试 结果 的 比较 分 析 
图 (图 9-63). 

RPT 也 为 测试 结果 提供 了 直观 的 图 表 表 现 ( 图 9-64) ,默认 情况 下 ,用 户 可 以 直接 看 
到 对 测试 成 功率 的 总 体 柱状 图 、 整 个 测试 过 程 完成 的 总 体 信息 列表 、 测 试 中 页 面 的 反应 
时 间 曲 线 图 等 报告 。 也 可 以 通过 添加 其 他 监控 信息 的 方法 ,将 其 他 资源 的 监控 图 秋 加 到 
当前 的 监控 图 中 。 

RPT 也 可 以 实现 多 次 测试 结果 的 比较 。 在 RPT 的 Test Navigator 中 选择 待 比较 的 测 
试 结果 ,在 其 右键 菜单 中 选择 Compare, 打 开 Compare Results 窗口 ,然后 将 需要 做 比较 的 
测试 结果 添加 进来 ,在 下 一 步 中 选择 要 显示 的 报告 , 单 击 Finish 按钮 打开 比较 结果 的 显示 
页 面 。 如 图 9-65 所 示 是 一 个 测试 结果 的 比较 报告 。 
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图 9-61 LR 添加 其 他 资源 监控 图 
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图 9-62 LR 同一 次 测试 中 多 种 监控 图 的 又 加 


r R * ys 
Fle Edt Vew Gaph Reports Tods Heb 


ISTAR ww o| voc eH | 


[E If R01. Plot blogs andy ka Average Transaction Response Time Total Transactions per Second | sje 
Aen Gap». Total Transactions per Second 


Ves\Second ime sexu ir 
Z AR fend Plo .0814B ves Virst me, result hr 
[V DALR Result 101. plot 07286. ZuesVThed lime, result ir 


Ex 


F Create New Anales Session for cross result 


LX | ce] rw | 


图 9-63 LR 多 次 历史 测试 结果 之 间 的 比较 
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9-65 RPT 多 次 历史 测试 结果 之 间 的 比较 报告 


通过 上 面 的 对 比分 析 ,决定 选择 RPT 作为 MMIS 系统 的 压力 测试 工具 。 下 面 , 再 介绍 
一 些 Rational Performance Tester 的 实用 技巧 。 


1. 调整 日 志 采 样 频 率 和 粒度 以 适应 不 同 的 测试 场景 


RPT 的 Schedule 提供 了 测试 数据 的 采样 频率 和 采样 粒度 的 配置 ,以 适应 不 同 的 测试 场 
景 。 在 做 长 时 间 测 试 时 ,在 Schedule 的 配置 面板 中 的 Statistics 选项 卡 (图 9-66) 中 通过 适 
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当 增加 日 志 采样 间隔 时 间 日志 级 别 和 采样 用 户 量 , 降 低 RPT 的 压力 ,避免 因 采 样 数据 量 过 
大 ,使 内 存 耗 尽 ,导致 RPT 无 法 响应 。 


(General | Run Duration | Think Time | Resource Monitoring EPI, Test Log | >> 


Statistics log level: Al ` 


Statistics sample interval: s [minutes ` 


Only sample information from a subset of users 
© Fixed number of users: per user group 
(S) Percentage of users: Eo | per user group 


[v] Only store All Hosts statistics 


图 9-66 Statistics 配置 


在 测试 过 程 中 ,RPT 会 记录 测试 中 的 请 求 数据 和 响应 数据 ,以 便 在 测试 之 后 查看 测试 
过 程 中 的 数据 和 错误 信息 。 对 于 长 时 间 测 试 , 会 产生 大 量 的 请 求 和 响应 数据 ,这 些 大 量 的 日 
志 信 息 会 让 RPT 不 堪 重 负 。 在 Schedule 配置 部 分 的 Test Log 选项 卡 中 提供 了 日 志 记录 
的 级 别 设置 ,对 于 长 时 间 的 测试 ,推荐 使 用 如 图 9-67 所 示 的 配置 ,记录 错误 和 警告 信息 的 级 
别 为 All ,而 对 于 其 他 信息 则 只 记录 Primary Test Actions 即 可 。 


(General [Run Duration | Think Time | Resource Monitoring [ statistics RI, > 


What to Log Log Level 
[V] Show errors and failures Al ~ 
[V] Also show warnings Al a 
[E] And also show all other types | Primary Test Actions [m 
Schedule Actions 
[v] Only sample information from a 
Secondary Test Actions 
© Fixed number of users: Action Details 
Percentage of users: i UU UU — — serrera 


图 9-67 LOG 配置 


2. 通过 Custom Code 实现 多 条 测试 数据 的 随机 读 取 


在 RPT 中 通常 采用 DataPool 的 形式 作为 少量 测试 数据 (例如 ,模拟 多 个 用 户 登 录 所 用 
的 多 个 用 户 名 密码 信息 ) 的 输入 。 不 过 DataPool 的 读 取 方 式 为 顺序 读 取 。 如 果 对 于 输入 数 
据 需 要 随机 读 取 , 则 可 以 通过 Custom Code 来 实现 。 其 实现 方式 可 以 是 将 测试 数据 存 为 
“x% ,cvs” 等 格式 文件 ,然后 通过 文件 操作 ,并 根据 随机 数 从 文件 中 读 取 内 容 作 为 测试 输入 
数据 。 


3. 使 用 超大 测试 数据 集 文件 


对 于 在 测试 过 程 中 存在 少量 测试 数据 分 次 作为 测试 输入 数据 时 (例如 ,模拟 多 个 用 户 登 
录 所 用 的 多 个 用 户 名 密码 信息 ) ,通常 采用 DataPool 的 形式 ,但 是 在 测试 数据 量 较 大 时 该 方 
法 就 不 再 适用 ,因为 对 于 DataPool 中 的 数据 ,测试 开始 时 就 被 全 部 加 载 到 内 存 , 如 果 测 试 数 
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据 量 过 大 ,这 种 方式 会 造成 大 量 的 内 存 浪费 。 
这 种 情况 可 以 通过 RPT 提供 的 扩展 功能 Custom Code 来 定制 代码 ,达到 在 测试 过 程 
中 在 需要 的 时 候 再 去 加 载 所 需 的 内 容 , 其 实现 也 可 以 采用 文件 操作 的 方式 。 


9.3.3 获取 RPT License Key 


正式 使 用 RPT 前 ,需要 获得 官方 授权 的 License Key。 涉 及 的 要 点 内 容 介绍 如 下 。 
1. 进入 LKC 


(1) 打开 License Key Center (LKC) 的 网 址 : http; //www-306. ibm. com/software/ 
rational/support/licensing/ 。 

(2) 单 击 IBM Rational License Key Center。 

(3) 在 新 页 面 中 单 击 Continue 按钮 。 


2. 加 入 账户 


(D 在 Rational License Key Center 页 面 中 , 单 击 链接 Don't have a password, 

(2) 填写 表格 。Sales Order Number 格式 : 00 *** ,Site Number 格式 :“000 xxx 。 
Sales Order Number 和 Site Number 可 以 在 授权 书 (Proof of Entitlement) 上 找到 。 单 击 
Submit 按钮 。 

(3) 用 户 会 收 到 一 封 写 有 LKC 临时 密码 的 邮件 。 在 第 一 次 进入 LKC 时 ,必须 修改 


3. 产生 license 


成 功 进 入 LKC 后 ,可 以 按 以 下 步骤 产生 license, 

CD 在 左边 的 选项 中 , 单 击 Get Keys, fE Get Keys 页 面 中 选择 需要 的 license 种类。 

(2) 在 Select license key 页 面 上 ,在 所 选择 的 license 前 打 勾 ,并 且 单 击 Generate 
按钮 。 

(3) 在 Quantities and host information 页 面 , 请 填写 必 填 部 分 。 

(D f£ Number of keys to generate 中 写 下 数字 。 最 多 可 用 的 数目 为 Number of keys 
available 下 的 数字 。 

© 在 server host ID 劳 的 下 拉 菜 单 里 为 license 所 在 的 机 器 选择 平台 。 

© 在 已 经 安装 产品 的 license Server 机 器 上 运行 : 开始 -Run~~ 写 下 hostinfo。 把 信息 
复制 到 Host ID 和 Host Name 里 。 

© 单 击 在 页 面 下 方 的 Generate 按钮 。 


9.3.4 RPT 更 新 


打开 IBM Installation Manager, 如 图 9-68 所 示 。 
启动 IBM Installation Manager, 界 面 如 图 9-69 所 示 。 
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图 9-68 打开 IBM Installation Manager 


IBM. 


IBM Installation Manager 
vit 


putr ON ] 
PSE- jaw 


Licensed Material - Property of IBM Corp. (c) Copyright by IBM Corp. and oth es) 1991, 2007. All Rights 
Regeved. IBM & IBM Corp. P M, Built on Eclipse & Eclipse Foundation, Ino. PNR Java MMA 
AF Java PM CARN 8 Sun Micoctems Inc. PA E W GN: 5 B PUS 39 ë 6 E EN AXE 
国 京 或 地 区 的 商标 或 注册 商标 , 


图 9-69 IBM Installation Manager 的 启动 界面 


IBM Installation Manager 的 主 界面 如 图 9-70 所 示 。 

单 击 IBM Installation Manager 的 “文件 ”一 “首选 项 ”菜单 ,如 图 9-71 所 示 。 

取消 色 选 “在 安装 和 更 新 过 程 中 搜索 服务 存储 库 ” 复 选 框 ,在 弹出 的 “首选 项 ”窗口 中 单 
击 “ 添 加 存储 库 ” 按 钮 ,如 图 9-72 所 示 。 

在 弹出 的 “添加 存储 库 ” 对 话 框 中 单 击 “ 浏 览 ” 按 钮 ,如 图 9-73 所 示 。 

弹出 “选择 存储 库 ” 对 话 框 ,如 图 9-74 所 示 。 

选择 “存储 库 ” 的 位 置 ,如 图 9-75 所 示 。 

图 9-76 是 IBM Installation Manager 升级 时 使 用 的 存储 库 文件 ,选择 后 单 击 “ 打 开 ” 
按钮 。 


图 9-70 


winana 


IBM Installation Manager 的 主 界面 


更 新 软件 本 


9-71 单 击 “首选 项 ” 


n 
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图 9-72 ”去掉 搜 索 服务 存储 库 并 添加 存储 库 
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图 9-73 单 击 “浏览 "按钮 
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图 9-74 选择 存储 库 
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图 9-75 ”选择 “存储 库 ” 的 位 置 
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上 话 加 存储 库 
选择 存储 库 
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我 是 近 的 文档 | | 局 offerines 


G p) 


wiru 


PLESI 


BETERRI O C 包括 Installation Winacer 本 身 ) MERERI AMERI. 
DERRNEPORPRRRSTIER O). 


图 9-76 升级 时 使 用 的 存储 库 文件 


“存储 库 ” 的 路 径 添加 完成 后 单 击 “ 确 定 ” 按 钮 ,如 图 9-77 所 示 。 


[XCTI] 


C—= 


r> ] am 
sger ñus: 
RBS r m 
& 添加 存储 库 
话 加 存储 库 


指定 一 个 存储 库 并 格 其 示 加 | 让 请 库 首 迄 项 列表 


mur: 
[EEC 


BETIERE C 包括 Installation Wanerer 38 ) MERRI ANETH. 
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相应 地 添加 需要 的 “存储 库 ”, 例 如 RPT 7.0 的 安装 存储 库 和 RPT 7. 
如 图 9-78 所 示 。 


1 的 升级 存储 库 ， 
存储 库 
Mw sux: 
TENUES liuc mure umm E 1 == 
E] DATT TO sk E 
E) DATON gT. nda PT CE 
in ELIT 
ET TJ 
TI 
[r1 
AER D 
BETERE ( 包括 Installation Wanager EA) 的 更 新 或 扩展 的 运程 位 置 。 
CTeseu timor o RIS THUS G). 
qnaa ap) ER 
>° Ca JC wa J 
9-78 ”添加 需要 的 “存储 库 ” 


单 击 “更 新 软件 包 ”, 如 图 9-79 所 示 。 


9-79 更 新 软件 包 
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选择 需要 更 新 的 软件 包 , 单 击 “ 下 一 步 ”按钮 , 接 下 来 的 步骤 基本 上 都 是 单 击 “ 下 一 步 ” 按 
钮 的 操作 ,直到 安装 或 更 新 完成 ,如 图 9-80 所 示 。 


% HW ational Performance Tester. C roga Le INITIO 
LIB Software Development Hat£orn CAP ee Bila SEO 


ERROREM 
IME tionale Performance Tester TD 1 C PIBIBER: T O 0 20071001 1117) 


o s=sə Era] =s C73 


图 9-80 单 击 “ 下 一 步 " 按 钮 


在 下 一 个 页 面 下 载 license(. upd) 到 license server 上 。 在 license server 上 打开 此 . upd 
文件 ,如 图 9-81 所 示 。 
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accort memoare tam tor popup! 
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Product preterencos 
HOM Rasonal Rebel losing License Key in = 
uk der (mtngual) 
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Neo dorais elect an eamaq hort rom P a or entar a ne on 
raa [ET | 
Li rtm tosts [Use existing host. 
[Disk Senai Number (Windows oni 习 
(Win iy) 


[ru 


Advanced users (optiona - For mp avataplly envtoneerts icense servers can run ih a redundat 3-server cute 
"you wart o use e option, erter bot renart servers Below as wel as e primary server above, relig pot 
news 


mais [Messi (Solos only El 


9-81 下 载 license 
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9.3.5 RPT 创建 项 目 


(1) 新 建 D:\StressTestProject 文件 夹 , 如 图 9-82 所 示 o 


(D Workspace Launcher 


Select a workspace 


Rational Performance Tester stores your projects in a folder called a workspace 
Choose a workspace folder to use for this session. 


Workspace: 


Use this es the default end do not ask again 


图 9-82 ”新 建文 件 夹 
(2) 打开 RPT, 如 图 9-83 所 示 。 


@ rest - Rational Performance Tester 
Tile Bit Nvigate Sayreh Project dun Mindor Help 
[we *-O-9,.-q.- | Tet 


BE Outline HD Prop.. Peto |° D 


lAn outline is not available 


Description 


图 9-83 RPT 界面 


(3) 选择 菜单 File New— Performance Test Project 来 创建 一 个 新 的 RPT 项 目 , 如 
图 9-84 所 示 。 
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(D Hew Performance Test Project 


Create a Performance Test project 


Create a new Performance Test Project in the workspace or in an external location. 


Project name: | 


v] Use default location 


图 9-84 创建 RPT 项 目 
(4) 输入 "mmisTestProject”, 然 后 单 击 Finish 按钮 ,如 图 9-85 所 示 o 


(D Hev Performance Test Project 


Create a Performance Test project 


Create a new Performance Test Project in the workspace or in an external location 


Eroject name: [nni sTestProject 


V] Use default location 


D/s 


图 9-85 输入 项 目 名 称 


(5) 打开 D:\StressTestProject 文件 夹 , 然 后 把 1BM 发 出 的 RAR 包 的 内 容 解压 ,复制 
以 下 3 个 高 亮 的 目录 到 D: NStressTestProject 文件 夹 ,如 图 9-86 所 示 。 
(6) 返回 RPT 界面 , 右 击 , 选 择 Refresh 选项 ,如 图 9-87 所 示 。 
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图 9-86 项 目 文件 夹 
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图 9-87 刷新 
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9.3.6 系统 压力 测试 


下 面 从 压力 测试 的 范围 ,测量 标准 \ 环 境 及 所 需 的 数据 等 几 个 方面 介绍 使 用 压力 测试 工 
H IBM Rational Performance Tester 7. 0 完成 对 维护 管理 信息 系统 (MMIS) 奈 力 测试 的 
情况 。 


1. 压力 测试 的 目标 


压力 测试 的 目标 是 要 确保 MMIS 系统 能 在 不 同 的 载荷 情形 下 符合 津 澳 地 铁 与 电讯 一 科 
所 商定 的 性 能 要 求 。 在 受 控 测 试 环境 中 实现 MMIS 中 的 关键 业务 功能 将 会 在 生产 环境 中 所 预 
计 的 正常 及 最 高 载荷 情况 下 有 效 及 高 效 地 执行 ,从 而 为 项 目的 顺利 完成 确立 一 定 的 信心 。 

主要 的 目标 是 确保 : 

(1) 性 能 测试 在 即将 的 生产 环境 中 进行 。 

(2) 性 能 测试 涵盖 最 为 关注 及 已 议定 的 事务 处 理 ,并 以 津 澳 地 铁 同意 的 功能 性 测试 场 
景 为 基础 。 

(3) 性 能 测试 要 确保 MMIS 能 满足 以 下 需求 。 

CD 在 线 创 建 /更 新 /删除 /获取 一 条 记录 : 二 5s。 

© 在 线 创建 /更 新 /删除 多 条 记录 : 二 15min。 

© 根据 用 户 指定 标准 进行 的 数据 获取 : 过 1min。 

@ 超过 这 些 基准 的 事务 处 理应 安排 以 批量 模式 运行 ,或 微调 系统 设计 /程序 好 辑 以 达 
到 指定 的 响应 时 间 。 

2. 压力 测试 的 范围 

已 识别 目标 功能 是 整体 应 用 用 途中 的 关键 领域 。 整 体 测试 场景 基本 上 是 来 自 于 功能 及 
系统 /整合 测试 场景 。 

表 9-4 是 已 识别 的 关键 事务 处 理 , 其 中 包括 进行 性 能 测试 的 创建 /更 新 /删除 /获取 操作 。 

表 9-4 已 识别 的 关键 事务 处 理 
模块 于 模块 


Location 


EI Equipment Registration 


Fitment/Refitment 
Standard Job 
Standard Job Pattern 
MP PM Master 
Planning Workbench 
Measurement 

Work Order 

Work Request 


WM š 
Timesheet 


Incident 


261 


Ë 
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以 下 所 有 列 出 模块 的 相关 活动 不 包括 在 本 次 性 能 测试 的 范围 之 内 ,属于 范围 外 的 活动 ， 
如 表 9-5 所 示 。 


表 9-5 范围 外 活动 


模块 子 模 块 


Equipment Class 


Equipment Class Group 


Equipment Structure Definition 


EI Equipment Structure 


Warranty & Contract 


Reporting Hierarchy 


Parts Catalog 


Maintain Personalization 


Change Password 


Organization 


Work Group 


Staff/Contractor 


User Role 


Access Group 


Security Policy 


User Account 


System Parameter 


SA System Period 


Batch Job 


Upload Interface 


Generic Code 


Work Nature 


Labor Rate 


Maintain Stock Code and Standard Unit Cost 


Document Upload 


Document Housekeep 


User Defined Field 


Home Page 
Performance Standard 
PA Budgets 
Cost 
All Reports 
3. 测试 场景 


如 表 9-6 所 示 ,主要 的 测试 环境 为 50 个 在 线 用 户 将 会 同时 在 不 同 的 模块 执行 不 同 的 动作 。 
(1) 12 个 在 线 用 户 将 会 在 EI 模块 执行 操作 。 

(2) 20 个 在 线 用 户 将 会 在 MP 模块 执行 操作 。 

(3) 18 个 在 线 用 户 将 会 在 WM 模块 执行 操作 。 
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X96 ”测试 场景 表 
类 别 模 块 功 能 用 户 数目 
Location 
Save 6 
Search 
Equipment Registration 
El Save 3 
Search 
Fitment/Refitment 
Confirm Fitment/Refitment 3 
Movement 
Standard Job 
Save 6 
Search 
Standard Job Pattern 
Save 4 
Search 
PM Master 
Create PM Master ë 
MP Search 
Tabulate 
Planning Workbench 
Job search 2 
Work order generation 
Measurement 
Search reading 2 
Measurement statistics calculation 
Measurement statistics search 
Work Order 
Quick Form/Save 
Quick Form/Change Status 
Quick Form/Find 12 
Quick Form/Search 
Full Form/Save 
Full Form/Find 
Work Request 
WM Save 
Create work order 2 
Search 
Timesheet 
Save 2 
Search 
Incident 
Save 2 


Search 
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4. 压力 测试 方法 
整体 压力 测试 阶段 的 流程 将 会 如 图 9-88 所 示 。 


图 9-88 ”压力 测试 流程 


压力 测试 有 50 个 模拟 用 户 模 拟 加 载 过 程 。 所 有 压力 测试 场景 会 逐一 执行 并 记录 测试 

以 下 组 件 是 OLTP 事务 处 理 的 性 能 测试 。 

(1) 自动 测试 工具 Rational Performance Tester 用 于 模拟 多 用 户 的 事务 处 理 。 

(2) 性 能 统计 数据 会 按照 以 下 方法 收集 。 

(D 应用: 由 Rational Performance Tester 提供 性 能 报告 。 

@ 数据库 : 由 Oracle 性 能 工具 获取 数据 库 性 能 测量 数据 。 

@ 服务 器 : 一 套 一 般 UNIX 指令 (如 vmstat 和 iostat) 及 Rational Performance Tester 
用 于 获取 操作 系统 的 水 平 测量 数据 。 

1) 进入 标准 

(1) 压力 测试 环境 应 用 所 有 所 需 的 应 用 程序 及 数据 库 补 丁 。 

(2) 按照 应 用 配置 文档 配置 MMIS 模块 。 

(3) 压力 测试 服务 器 的 日 期 及 时 间 是 实际 的 日 历 日 期 时 间 。 

(4) 主 数据 及 事务 处 理 数据 成 功 加 载 到 压力 测试 环境 。 

(5) 审阅 及 完成 测试 数据 测试 场景 及 脚本 的 准备 工作 。 

(6) MMIS 压力 测试 环境 是 可 操控 的 ,并 获得 所 需 的 程序 /报告 。 

(7) 压力 测试 方案 经 由 津 澳 地 铁 及 电讯 盘 科 双方 商定 。 

2) 退出 标准 

(1) MMIS 压力 测试 环境 是 可 操控 的 ,并 获得 所 需 的 程序 /报告 。 

(2) 数据 成 功 加 载 到 压力 测试 环境 。 

(3) 已 执行 测试 循环 的 所 有 测试 用 例 。 

COD 有 实际 的 书面 测试 结果 作为 测试 的 证 明 。 

O) 获取 并 签署 压力 测试 实际 结果 。 

(6) 已 成 功 测试 MMIS 的 所 有 测试 循环 、 子 循环 及 测试 用 例 。 
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(7) 压力 测试 结果 必须 达到 第 1. 1 节 所 述 目 标 。 
(8) 津 澳 地 铁 已 同意 并 签署 以 上 标准 的 任何 例外 情况 。 
5. 测试 环境 


压力 测试 的 环境 如 图 9-89 所 示 , 共 有 一 台 HP 应 用 服务 器 用 于 本 次 压力 测试 ,并 无 任 
何 集群 环境 。 


Application Server 


Database Server Client PC Client PC 
(Users) (Users) 


图 9-89 压力 测试 环境 


MMIS 系统 软件 的 版 本 是 V1.0 BUILDI1 。 
应 用 服务 器 为 一 台 HP 服务 器 ,其 硬件 配置 如 表 9-7 所 示 。 


表 9-7 应 用 服务 器 硬件 配置 


类 型 Application Server 类 型 Application Server 
CPU 4X4 2000 MHz 硬盘 空间 136GB 
内 存 4GB IP Address 10. 199. 0. 198 


应 用 服务 器 的 系统 软件 如 表 9-8 所 示 。 
表 9-8 应 用 服务 器 的 系统 软件 


操作 系统 Red Hat Linux AS 4.1 
系统 软件 JBoss Application Server 4.2.1.GA x 2 
Java Runtime Environment JRE 5.0 


数据 库 服务 器 为 一 台 HP 服务 器 ,其 硬件 配置 如 表 9-9 所 示 。 
表 9-9 数据 库 服务 器 硬件 配置 


类 型 Database Server 
CPU 双 CPU Itanium@® processor,2X1.6 MHz 
内 存 8GB 
硬盘 空间 100GB 


IP Address 10. 199. 0. 15 
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数据 库 服 务 器 的 系统 软件 如 表 9-10 所 示 。 
表 9-10 数据 库 服务 器 的 系统 软件 


操作 系统 HP UNIX 11.23 


系统 软件 Oracle 10. 2. 0. 3 For HP-UX Itamium 


压力 测试 服务 器 为 一 台 IBM PC 服务 器 ,其 硬件 配置 如 表 9-11 所 示 。 
表 9-11 测试 服务 器 硬件 配置 


CPU Intel Core 2 Duo 2G 
内 存 2GB 
硬盘 空间 80GB 
IP Address 10.199. 2.215 


6. 测试 脚本 与 测试 数据 


测试 脚本 是 执行 测试 场景 所 要 执行 的 详细 操作 。 

测试 数据 是 基于 从 MMIS 系统 提取 的 数据 并 上 传 至 压力 测试 数据 库 。 
须 在 数据 库 中 准备 好 以 下 数据 。 

(1) Equipment Class; 

(2) Equipment Class Group; 

(3) Equipment Structure; 

(4) Location; 

(5) Organization; 

(6) Work Group; 

(7) Equipment; 

(8) Work Nature; 

(9) Symptom Code.Failure Code, Failure Cause Code. Component Code; 
(10) Equipment Structure Definition; 

(1D Standard Job Priority; 

(12) BOL/ BOM; 

(13) Resource Type; 

(14) Stock Code; 

(15) Work Order. 


7. 压力 测试 流程 


压力 测试 流程 的 相关 步骤 依次 如 下 。 

(1) 分 析 及 提取 MMIS 系统 的 典型 业务 。 

(2) 记录 脚本 , 设 定 相关 参数 ,如 压力 序列 ` 压 力 方法 等 。 
(3) 设置 监控 参数 。 


(4) 运行 脚本 并 收集 图 表 。 
(5) 继续 运行 数 次 ,汇总 各 次 测试 的 测试 结果 。 
(6) 分 析 测 试 结果 并 确定 系统 的 瓶颈 。 


(7) 制定 优化 方案 ,确定 问题 是 否 来 自 硬 件 或 软件 。 


8. 测试 结果 分 析 
下 面 简要 地 说 明 上 述 测试 场景 的 测试 结果 。 
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对 于 所 有 场景 ,每 3s 会 添加 一 个 在 线 用 户 。 在 执行 脚本 之 前 ,会 设 定 5s 的 延迟 时 间 。 


场景 将 在 30min 内 完成 测试 。 


50 个 在 线 用 户 同时 在 不 同 模块 执行 各 种 操作 ,如 表 9-6 所 示 。 针 对 各 个 测试 场景 , 按 


照 以 下 标准 进行 测试 结果 分 析 。 
1) 应 用 性 能 
(1) 关注 应 用 响应 时 间 ; 
(2) 各 项 动作 的 平均 处 理 响应 时 间 。 
2) 数据 库 性 能 
3) 系统 性 能 
CD 应 用 服务 器 利用 率 ; 
(2) 数据 库 服务 器 利用 率 。 
4) 结论 
运行 总 结 如 表 9-12 所 示 。 


表 9-12 运行 总 结 
已 执行 测试 MMIS_Customize_Sch 
活跃 用 户 
已 完成 用 户 50 
总 用 户 50 
共用 时 间 /H:M:S 0:30:01 
运行 状态 完成 
所 有 页 面 平 均 响应 时 间 /ms 568. 74 
性 能 总 结 如 表 9-13 所 示 。 
表 9-13 性 能 总 结 
事件 名 称 响应 时 间 /ms- 平 均 。 响应 时 间 /ms- 标 准 差 
Add Association For StandardJob 103. 63 30. 28 
Add BOL For StandardJobParameter 43.87 15.7 
Add BOM For StandardJobParameter 174.5 387.03 
Add EquipmentRegistration 51.53 30.85 
Add Fitment/Refitment History 18.07 5.44 
Add Incident 343. 72 21.76 
Add Location 56.39 202.17 
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续 表 

事件 名 称 响应 时 间 /ms- 平 均 — 响应 时 间 /ms- 标 准 差 
Add MeasurementReading 39.17 16.5 
Add MovementHistory 19. 86 10.32 
Add Opportunity For StandardJob 94.43 44. 85 
Add OtherCotst For StandardJobParameter 507.2 19.17 
Add PM Master 227.12 327.74 
Add Requirement For StandardJob 206.73 478. 12 
Add Scheduling For StandardJobParameter 29.67 19.19 
Add StandardJob 413.7 13.47 
Add StandardJobPattern 16 252 4422. 49 
Add Superseding For StandardJob 694. 33 672.41 
Add Tasks For StandardJob 104.4 323. 76 
Add TimeSheet 74.27 202. 63 
Add Work Order By Full Form 6803. 14 270.03 
Add Work Order By Quick Form 1266 443. 69 
Add WorkOrder By Request 795 35.73 
Add WorkRequest 3464.51 86.97 
Calculate MeasurementReading 166.33 377.6 
Change Work Order Status 50.21 50.59 
Click Planning Workbench Filter 304. 98 226.23 
Find Work Order By Full Form 27.44 11 
Find Work Order By QuickForm 18.37 7.96 
Input Planning Workbench Date Range 1421.3 67.66 
Login MMIS 30.15 23.05 
Login MMIS By Recipient01 31.5 0.71 
Open & Reset PM Master Page 700.57 16.74 
Open & Reset PM Master Search Page 245. 78 31.81 
Open Change Work Order Page 33.25 13.82 
Open Equipment Registration Page 1838. 94 430. 62 
Open Fitment/Defiment History Page 18 10. 46 
Open Incident Page For Add Incident And Update Incident 453. 41 136.52 
Open Location Page 37.15 164.31 
Open MMIS Home Page 3852.04 381.33 
Open MMIS Home Page By Recipient01 3750 0 
Open MMIS Login Page 222. 94 73.72 
Open MMIS Login Page By Recipient01 227 55.15 
Open Planning Workbench Filter Page (1) 245. 54 25.22 
Open Planning Workbench Filter Page (2) 18.65 32. 62 
Open Planning Workbench Follow Up Tag 22.65 8.59 
Open Planning Workbench Planned Tag And Caculate 127.15 334. 78 
Planning Workbench 
Open PM Master Search Page 1818. 68 223. 33 


Open PM Master Search Result Page 697.79 267.24 
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续 表 

事件 名 称 响应 时 间 /ms- 平 均 ”响应 时 间 /ms- 标 准 差 
Open Search Measurement Statistics Page 39. 17 74.01 
Open StandardJobParameter Page 16.83 12.37 
Open Work Order Page For Find Work Order By QuickForm 14.85 7.98 
Recalculate All Statistics 18.33 6.22 
Recalculate Statistics 15.67 9.81 
Reset Planning Workbench Filter 89.72 256. 72 
Search PM Master 710.88 19. 68 
Search Potential PM Master 1542. 32 793. 75 
Search Statistics 341.17 116.59 
Tabulate PM Master 47.98 52. 26 
Update Add Fitment/Refitment History 20.04 37.57 
Update EquipmentRegistration 28.61 24. 22 
Update Incident 30. 61 58. 13 
Update Location 74.56 324. 99 
Update MeasurementReading 20.5 12. 74 
Update MovementHistory 19.61 22.81 
Update Planning Workbench For Follow Up 53. 33 185. 85 
Update Planning Workbench For Planned 7983. 31 44. 09 
Update PM Master 32.62 15.57 
Update StandardJob 82.5 42. 61 
Update StandardJobParameter 36.41 18. 24 
Update StandardJobPattern 19.38 7.19 
Update TimeSheet 21.36 10.81 
Update Work Order By Full Form 29.08 10. 45 
Update Work Order By Quick Form 20.19 10. 73 
Update WorkRequest And Send To Recipient 24 114. 03 19.1 


50 个 用 户 在 线 时 响应 时 间 最 高 的 10 项 事件 如 图 9-90 所 示 。 


运行 的 平均 页 面 响应 时 间 《 应 用 的 过 涛 器 : 计数 过 涛 器 : 最 高 为 10 》 
24, 000 


12, 000 


6, 000 


03.95... 3,750 1,93...6,12.. 3,46... 24,1... 7,90... 2,25...6, 90... 1,81 


Open MXIS Home Page B] Open IIIS Home Page... 国 Open Equipment Reti... 
Temp Load Equipment... 国 Add Rorkhequest BB] Update RorkRequest 
Update Planning Ror... ËB Temp Search PX Mast. BB idd fork Order Br F... 
Open PK Master Sear 


图 9-90 50 个 用 户 在 线 时 响应 时 间 最 高 的 10 项 事件 


在 50 个 并 发 用 户 的 场景 下 ,有 更 多 的 在 线 功 能 所 用 时 间 少 于 预期 的 目标 响应 时 间 。 因 
此 得 到 的 结论 是 ,压力 测试 中 采用 的 硬件 配置 能 支持 大 于 50 个 并 发 用 户 。 
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通过 应 用 服务 器 的 资源 情况 ,得 到 的 结论 是 ,应 用 服务 器 的 内 存 能 有 效 改善 系统 的 性 


能 。 因 此 在 升级 硬件 配置 的 时 候 应 关注 内 存 的 容量 。 


假 考 是 


mm 0 D — 


. 简要 介绍 性 能 测试 工具 软件 LoadRunner。 

. 通过 实例 练习 使 用 性 能 测试 工具 软件 LoadRunner。 

. 简要 介绍 安全 测试 工具 软件 AppScan。 

. 通过 实例 练习 使 用 安全 测试 工具 软件 AppScan。 

. 对比 分析 IBM RPT 和 HP LR 这 两 种 性 能 /压力 测试 工具 。 


测试 管理 工具 | 


本 章 学 习 重 点 


。 熟悉 常见 的 缺陷 管理 工具 软件 Mantis 的 安装 
。 熟悉 常见 的 综合 管理 工具 软件 TestDirector Ai 与 应 用 。 


° 熟悉 常见 的 缺陷 管理 工具 软件 Mantis 的 应 用 。 
。 热 悉 常 见 的 综合 管理 工具 软件 TestDirector 的 应 用 。 


(0.1 缺陷 管理 工具 
— 


10.1.1 关于 Mantis 


Mantis 是 一 个 基于 PHP 技术 的 轻 量 级 的 开源 缺陷 跟踪 系统 ,以 Web 操作 的 形式 提供 
项 目 管理 及 缺陷 跟踪 服务 。 在 功能 上 、 实 用 性 上 足以 满足 中 小 型 项 目的 管理 及 跟踪 。 更 重 
要 的 是 其 开源 ,因此 对 于 企业 来 说 ,不 需要 负担 任何 费用 。 

Mantis 是 一 个 缺陷 跟踪 系统 ,具有 多 种 特性 ,包括 : 易于 安装 ,易于 操作 ,基于 Web, X 
持 任 何 可 运行 PHP 的 平台 (Windows,Linux, Mac,Solaris, AS400/i5 等 ) ,已 经 被 翻译 成 68 

种 语言 ,支持 多 个 项 目 ,为 每 一 个 项 目 设置 不 同 的 用 户 访问 级 别 , 跟 踪 缺 陷 变 更 历史 ,定制 我 

的 视图 页 面 ,提供 全 文 搜索 功能 ,内 置 报表 生成 功能 (包括 图 形 报表 ) ,通过 E-mail 报告 缺 
陷 , 用 户 可 以 监视 特殊 的 Bug ,附件 可 以 保存 在 Web 服务 器 上 或 数据 库 中 (还 可 以 备份 到 
FTP 服务 器 上 ), 自 定义 缺陷 处 理工 作 流 , 支 持 输 出 格 包括 csv, Microsoft Excel, Microsoft 
Word, 集 成 源 代码 控制 (SVN 与 CVS) ,集成 Wiki 知识 库 与 聊天 工具 (可 选 /可 不 选 ) ,支持 
多 种 数据 库 (MySQL、MSSQL PostgreSQL, Oracle, DB2) ,提供 WebServiceCSOAP) 接 口 ， 
提供 Wap 访问 。 

Mantis 具有 以 下 特点 。 

CD 个 人 可 定制 的 E-mail 通知 功能 ,每 个 用 户 可 根据 自身 的 工作 特点 只 订阅 相关 缺陷 
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状态 邮件 ; 

(2) 支持 多 项 目 、 多 语言 ; 

(3) 权限 设置 灵活 ,不 同 角 色 有 不 同 权限 ,每 个 项 目 可 设 为 公开 或 私有 状态 ,每 个 缺陷 
可 设 为 公开 或 私有 状态 ,每 个 缺陷 可 以 在 不 同 项 目 间 移 动 ; 

(4) 主页 可 发 布 项 目 相关 新 闻 ,方便 信息 传播 ; 

(5) 具有 方便 的 缺陷 关联 功能 , 除 重复 缺陷 外 ,每 个 缺陷 都 可 以 链接 到 其 他 相关 缺陷 ， 

(6) 缺陷 报告 可 打印 或 输出 为 CSV 格式 ,1.1.7 版: 支持 可 定制 的 报表 输出 ,可 定制 用 
户 输入 域 ; 

CD 有 各 种 缺陷 趋势 图 和 柱状 图 ,为 项 目 状 态 分 析 提供 依据 ,如 果 不 能 满足 要 求 , 可 以 
把 数据 输出 到 Excel 中 进一步 分 析 ; 

(8) 流程 定制 方便 且 符合 标准 ,满足 一 般 的 缺陷 跟踪 。 


10.1.2 使 用 Mantis 


1. 登录 Mantis 
在 登录 后 进入 Mantis 的 主 界面 ,如 图 10-1 所 示 。 
ti 
mantis 
ÆR»: james (ames - 报 省 人 员 ) 04-27-2006 13:59 BH xig: [mesa s] cena] 
AN EDHE | 查看 问题 | 报告 问题 | 282 | ZAWA | 个 人 账号 | 注销 C 
未 指定 的 [^1(1-2/2) ARRSH [~^] (0 - 0 / 0) 
已 解决 的 [^)(0-0/0) 最 近 修 改 [~^] (1- 3 / 3) 


我 正在 监视 的 [^] (0 - 0 / 0》 


10-1 Mantis 的 主 界面 


在 主 界面 中 可 以 看 到 一 条 工具 栏 ,这 就 是 用 户 能 够 使 用 的 所 有 功能 了 。 在 工具 栏 的 下 
方 可 以 看 到 有 5 XE ,分 别 如 下 。 

CD 未 指定 的 : 是 指 问题 已 经 报告 ,但 还 没有 指定 由 哪个 项 目 组 成 员 进 行 跟 进 的 问题 
列表 。 

(2) 已 解决 的 : 指 问题 已 经 得 到 解决 ,问题 的 状态 为 “已 经 解决 ”。 

(3) 我 正在 监视 的 : 指 你 正在 监视 哪些 问题 ,在 问题 报告 中 ,你 被 选 为 监视 人 。 

(4) 由 我 报告 的 : 在 这 里 将 会 显示 由 你 报告 的 问题 列表 。 

(5) 最 近 修 改 : 这 一 栏 显示 哪些 问题 报告 最 近 被 项 目 组 成 员 修改 了 。 
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2. 问题 报告 
单 击 “ 报 告 问题 ”进入 以 下 页 面 ,选择 报告 的 问题 所 属 的 项 目 , 如 图 10-2 所 示 , 


首页 | 我 的 视图 | 坦 看 问题 | 报告 问题 | 修改 日 去 | 使 用 说 明 | 个 人 账号 | 注销 上 saaws || 


ARAH 


z 


图 10-2 选择 所 属 项 目 
从 下 拉 框 选择 完成 后 , 单 击 * 选 择 项 目 "按钮 ,进入 问题 报告 主 界面 ,如 图 10-3 所 示 。 


[ 高 级 报告 ] 


图 10-3 问题 报告 主 界面 


在 图 10-3 中 有 些 项 目 是 标 了 红星 的 ,表示 这 些 是 必 填 内 容 。 填 好 问题 报告 后 , 单 击 “ 提 
交 报告 " 按 钮 ,就 会 将 此 问题 提交 到 系统 ,系统 将 会 通过 E-mail 通知 项 目 组 的 相关 人 员 。 

在 问题 报告 的 右上 角 有 一 个 “高 级 报告 ”的 选项 , 单 击 后 ,将 会 出 现 以 下 页 面 ,如 图 10-4 
所 示 。 

单 击 “ 高 级 报告 "后 ,会 发 现 比 原来 多 出 来 的 好 几 个 选项 ,这 些 都 是 有 利于 模拟 问题 重 
现 的 。 


3. 问题 查询 
查找 问题 ,只 需 单 击 工具 栏 上 的 “查看 问题 ”, 就 会 出 现 以 下 界面 ,如 图 10-6 所 示 。 
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图 10-4 高 级 报告 页 面 


masa bug tracking system 
ER>: james Games - REAR) 04-27-2006 17:25 PEMPE ma: [exe 辐 
AN | 我 的 视图 | 查看 问题 | 报告 问题 | 您 改 日 志 | HAWA | ABS | 注销 C | 


图 10-5 查看 问题 界面 


在 工具 栏 的 下 方 ,有 一 个 深浅 色相 隔 的 表格 ,这些 表格 的 内 容 正 是 查找 的 条 件 选项 , 单 
击 其 中 一 选项 ,就 会 出 现 一 个 下 拉 框 代替 任意 两 个 字 , 让 用 户 输入 要 查找 的 内 容 。 输 入 完成 
后 , 单 击 “ 筛 选 ?按钮 就 会 将 结果 返回 到 下 方 的 表格 。 

图 10-6 就 是 返回 的 查找 结果 , 单 击 相应 的 记录 可 以 进行 修改 。 


查看 问题 1 - 2 / 2) [ 打印 报告 ] [ csv Sit ] 


图 10-6 返回 查找 结果 
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4. 问题 修改 
在 查找 结果 的 列表 上 单 击 “ 编 号 ”, 则 会 进入 问题 修改 的 页 面 ,如 图 10-7 所 示 。 


查看 问题 详细 资料 (简易 ) (EGER ] [ EEE ] 【zz] LESSE ] [ 问题 历史 ] [ 打印 J 


图 10-7 问题 修改 页 面 


在 图 10-7 中 一 共有 6 个 按钮 ,具体 功能 如 下 。 

(1) 修改 问题 : 进入 问题 明细 页 面 进行 修改 。 

(2) 分 派 给 : 是 指 将 这 个 问题 分 派 给 哪个 人 员 处 理 ,一般 只 能 选择 开发 员 权 限 的 人 员 o 

(3) 将 状态 改 为 : 更 改 问 题 的 状态 ,将 需要 输入 更 改 状态 的 理由 。 

(4) 监视 问题 : 单 击 后 ,所 有 和 这 个 问题 相关 的 改动 都 会 通过 E-mail 发 到 监视 用 户 的 
邮箱 。 

(5) 创建 子 项 问题 ; 建立 一 个 问题 的 子 项 ,而 这 个 子 项 报告 的 问题 是 依赖 于 这 个 问题 
而 存在 的 。 

(6) 移动 问题 : 将 这 个 问题 转移 到 其 他 项 目 中 。 

图 10-8 是 关系 、 上 传 文件 以 及 问题 注释 添加 的 界面 。 


à | 


EE | 
ROW Sma — GRO 6 m 0000000 


当前 没有 用 户 在 监视 这 个 问题 ] 


ots | 
10-8 关系 、 上 传 文件 与 问题 注释 添加 
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图 10-9 是 问题 历史 的 展示 界面 。 


这 个 问题 没有 注释 信息 
[o 2.3] 
日 问题 历史 
04-27-06 11:41 administrator 新 建 问题 
04-29-06 09:49 administrator 关联 已 地 加 是 访问 题 的 子 项 : 0000001 
图 10-9 问题 历史 


10.1.3 报表 统计 


单 击 工具 栏 上 的 “报表 统计 ”, 以 表格 的 形式 对 问题 进行 统计 ,有 “ 按 问题 状态 ”“ 按 严重 


性 ”“ 按 项 目 分 类 ”等 ,如 图 10-10 所 示 。 


统计 报表 
r ARA GWA CAm 合计 | [ 按 日 其 
"v 2 - - ID 2 
已 关闭 - - 1 1| |2 3 
——————Y'———— 3 
按 严重 性 未 解决 已 解决 cXm 合计 7 3 
次 要 错误 2 0 1 3! [3o 3 
= 60 3 
按 项 目 分 类 XN DNE CAM fi 
stanmi 1 o 1 S0 3 
180 3 
已 解决 问题 的 所 用 时 间 (天 数 ) s z 
ora D00000 ERR #W GNE CAM m 
Aiae, FE 2 o o 2 
bagi 232 eur recen 
合计 时 间 0.12 
按 优先 权 FNA BWA EAM fit 
FRESA B CK OG p 
己 关 用/ 合计 ) 未 解决 已 解决 已 关 闭 mit " 1 o o 1 
ww a ^ al ai à 9 3 


图 10-10 报表 统计 


10.1.4 Mantis 的 管理 


本 节 将 介绍 Mantis 如 何 管理 用 户 、 如 何 管 理 项 目 、 如 何 添加 自 定义 字段 等 一 系列 功能 。 
1. 用 户 管理 


单 击 工具 栏 中 的 “管理 ”, 进 入 默认 的 界面 就 是 用 户 管理 界面 。 在 这 个 界面 中 ,能 看 到 一 


些 账户 的 信息 ,如 一 周 内 注册 的 用 户 、 从 未 登录 的 用 户 等 。 界 面 如 图 10-11 所 示 。 


在 这 个 界面 中 可 以 完成 以 下 功能 。 
CL) 删除 账号 : 对 于 一 些 从 未 使 用 的 账号 进行 删除 ,可 以 单 击 * 清 理 账 号 ?按钮 进行 删 


除 ,可 以 单 击 账号 列表 中 的 “账号 ”, 进 入 账号 明细 进行 删除 ,如 图 10-12 所 示 。 


(2) 权限 设置 : 为 账号 选择 一 个 合适 的 存 取 权限 的 角色 ,如 报告 人 员 、 开 发 人 员 管理 


员 等 。 


(3) 重 设 密码 : 单 击 重 设 密码 ,密码 将 会 以 E-mail 的 形式 发 到 用 户 登 记 的 电子 邮箱 。 
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Sam (-Bh)I5] 


ER 
从 未 号 示 [1] Mee) 
test 
fH ABCDEEGHIJKLMNOPORSIUVWXYZ0123456Z89 

RS [s] Glen | D peraan WE 
(— Esa AME Em gm RR 60 m — anam 8 

root@hlb.com TIR x 04-26-06 14:54 04-28-06 10:44 
do bomyQnbcom REAA 0e20051928 00 

james james@hlb.com mu. -一 一 一 一 04-27-06 17:55 

kasi MQhbcom — — RAR x — 0e29061940 00 

test@hlo.com x = 04-27-06 13:29 


图 10-11 用 户 管理 界面 


tis 
masm bug tracking system 


ERD: administrator (IR) 04-28-2006 11:06 ËB 项 目 : [ene x] 
EN | 我 的 视图 | 查看 问题 | 报告 问题 | 修改 日 村 | MHES | ARA | 管理 | MAF | 个 人 账号 | kW 一 reamws || 


[ 用户 管 理 ][ 项 目 管理 ] [ 自 证 义 字段 管理 J 管理 全 局 配置 ][ 管理 配置 ] 


编辑 使 用 者 
fesmuecem — 
L2 


lb. coa 
sw | 
EWE | meme | 
METEN, sagittata, 


图 10-12 清理 账号 


CD 添加 用 户 到 项 目 : 只 有 进行 过 这 一 操作 的 用 户 才 有 权限 对 特定 项 目 进行 操作 。 界 
面 如 图 10-13 所 示 。 


添加 用 户 至 项 目 
BARBAN: 00000 
oR ERNGNI 
[simam ] 


图 10-13 添加 用 户 到 项 目 


(5) 默认 账号 设置 : 在 这 里 设 定 E-mail 默认 的 提醒 情况 还 有 报告 时 的 默认 类 型 (高 级 
报告 还 是 简单 报告 ) ,最 重要 的 一 点 是 , “界面 语言 > 一定 要 设 为 Chinese_simplified ,和 否则 用 
户 登 录 时 将 会 显示 一 个 英文 界面 。 
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2. 项 目 管理 


在 这 一 栏 可 以 添加 一 个 新 项 目 到 Mantis ,方便 用 Mantis 管理 多 个 项 目的 问题 。 
(1) 创建 项 目 , 单 击 “ 创 建新 项 目 ”, 如 图 10-14 所 示 。 


[ASWI ][ 项 目 管理 ][ 自 本 义 字段 管理 ][ 管理 全 局 配置 ][ 管理 配置 ] 


sana enam] 


图 10-14 创建 新 项 目 


(2) 按 要 求 输入 项 目 内 容 , 完 成 后 单 击 “ 添 加 项 目 ”按钮 ,如 图 10-15 所 示 。 


[AAW ][ 项 目 管理 ][ 自 定义 字段 管理 ][ EXS SEX ][ 管理 配置 ] 


图 10-15 添加 项 目 


(3) 项 目 配 置 是 在 创建 项 目 完成 后 进行 的 。 在 项 目 管理 列表 , 单 击 项 目 名 称 ,进入 项 目 
配置 界面 ,如 图 10-16 一 图 10-18 所 示 。 


[ 用 户 管理 ][ 项 目 管理 ] [ 自 定义 字段 管理 ] [ 管理 全 局 配置 ] [ 管理 配置 ] 


编辑 项 目 
| | 
| | 
-ge 

ges] 

p 

TaH MN 
[z] marae] 


10-16 编辑 项 目 


Hu 
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这 个 项 目 是 公共 的 ， 所 有 用 户 都 可 以 访问 该 项 目 。 


10-17 项 目 配置 


这 个 项 目 是 公共 的 ， 所 有 用 户 都 可 以 访问 该 项 目 。 


10-18 ”添加 用 户 至 项 目 、 管 理 账号 


在 图 10-16 一 图 10-18 中 共 分 为 以 下 5 大 块 功能 。 
(OD 子 项 目 : 在 这 里 新 建 一 个 子 项 目 并 设 定 关联 。 
© 分 类 : 设 定 该 项 目的 模块 分 类 。 


EV 
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Q 版 本 : 设 定 该 项 目的 版 本 号 。 

© 自 定义 字段 : 管理 另 一 栏 * 自 定义 字段 管理 ”, 添 加 自 定义 字段 ,必须 在 这 里 设 定 为 
属于 该 项 目 , 否 则 页 面 将 不 会 显示 。 

C) 添加 用 户 至 项 目 : 设 定 哪些 用 户 有 权 访 问 该 项 目的 内 容 。 


3. 自 定义 字段 管理 


通过 该 功能 ,不 仅 能 使 用 Mantis 预定 好 的 字段 ,还 可 以 添加 自 定义 的 字段 ,使 项 目 、 问 
题 报告 更 详尽 、 更 适宜 。 
CD 新 建 : 输入 自 定义 字段 的 名 称 ,然后 单 击 * 新 建 自 定义 字段 "按钮 ,如 图 10-19 所 示 。 


[AAW ][ 项 目 管理 ] [ G£ 248903 || 管理 全 局 配置 ][ 管理 配置 ] 


rl uer] 
是 类 型 1 vyan LLILI LL 
ES 
-es | 


Æ 10-19 自 定义 字段 


(2) 名 称 添加 完成 后 ,系统 会 提示 “操作 成 功 ”, 单 击 “ 继 续 ” 按 钮 ,进入 如 图 10-20 PH Ñ 
界面 进行 修改 。 


[ 用 户 管理 ][ 项 目 管理 ][ 自 定义 字段 管 理 ][ 管理 全 局 配置 ] [ 管理 配置 ] 


做 改 自 定义 字段 


图 10-20 ”修改 自 定义 字段 


(3) 可 以 设 定 字段 的 类 型 .默认 值 、 预 设 值 ,长 度 、 修 改 权限 等 。 不 过 需要 注意 一 点 ,如 
果 要 添加 下 拉 框 ( 即 枚 举 类 型 ) ,选项 内 容 要 以 *|? 隔 开 , 和 否则 所 有 选项 都 会 连 在 一 起 ,并 且 只 
有 一 项 选择 。 


4. 管理 全 局 配置 
在 这 里 可 以 设 定 测试 环境 ,方便 在 问题 报告 时 ,以 选择 的 方式 调 出 。 输 入 的 内 容 很 简 
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单 ,根据 提示 输入 就 可 以 了 ,如 图 10-21 所 示 。 
[ 用 户 管理 ) 项 目 管理 ][ 自 定义 字 段 管理 ][ 管理 全 局 配置 ][ 管理 配置 ] 


[gr] 
1021 管理 全 局 配置 


5. 管理 配置 
管理 配置 分 成 4 大 块 : 权限 报表 、 工 作 流 开始 .工作 流 PETERE S 
1) 权限 报表 
权限 报表 列 出 Mantis 的 6 大 角色 所 具有 的 权限 ,只 是 一 个 查询 功能 ,如 图 10-22 所 示 。 
新 闻 
权限 查看 人 员 报告 人 员 修改 人 员 开发 人 员 Lj 管理 员 
ass ss suami RE 
Y v 
附件 
权限 查看 人 员 报告 人 员 EZAR 开发 人 员 “m 管理 员 
E —— — rác ER panapas EREUEEISESZSSI 
itarln | Scis [eras] [ees EE 
上 伟 问 是 相关 附件 Y 

10-22 ”权限 报表 
2) 工作 流 开 始 
这 一 功能 实现 上 就 是 权限 的 设 定 , 如 图 10-23 所 示 。 
3) 工作 流 
工作 流 就 是 指定 问题 的 状态 存 取 权限 以 及 状态 的 下 一 状态 ,如 图 10-24 所 示 o 
4) 邮件 提醒 


该 功能 就 是 设 定 当 问题 发 生 何 种 变化 ,以 E-mail 通知 哪些 人 ,如 图 10-25 所 示 。 
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注意 : 这 些 设置 只 对 ds 系统 项 目 产生 影响 - 
在 下 面 的 表 中 ， 将 应 用 下 列 藉 色 + 


存 取 权限 级 别 
ne ESA RSA BRA HBA ua gun amaari 


图 10-23 工作 流 权限 设 定 


EE: 这 些 设置 只 对 ds 系统 项 目 产生 影响 - 
在 下 囊 的 表 中 ， 将 应 用 下 列 颜 色 : 


1024 工作 流 状态 设 定 


存 取 权 限 级 别 


个 | Lil 
ae "P.C. CURT "EDS k spe gore 


图 10-25 E-mail 提醒 
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(10.2 综合 管理 工具 


10.2.1 TestDirector 简介 


TestDirector 是 TestDirector Mercury Interactive 公司 推出 的 基于 Web 的 测试 管理 工 
具 ,无论 是 通过 Internet 还 是 通过 Intranet 都 可 以 以 基于 Web 的 方式 来 访问 TestDirector。 

应 用 程序 测试 是 非常 复杂 的 , 它 需 要 开发 和 执行 数 以 千 计 的 测试 用 例 。 通 常情 况 下 , 测 
试 需要 多 样式 的 硬件 平台 、 多 重 的 配置 (计算 机 ,操作 系统 ,浏览 器 ) 和 多 种 的 应 用 程序 版 本 。 
管理 整个 测试 过 程 中 的 各 个 部 分 是 非常 耗 时 和 困难 的 。 

TestDirector 能 够 让 用 户 系统 地 控制 整个 测试 过 程 , 并 创建 整个 测试 工作 流 的 框架 和 
基础 ,使 整个 测试 管理 过 程 变 得 更 为 简单 和 有 组 织 。 

TestDirector 能 够 帮助 用 户 维护 一 个 测试 工程 数据 库 , 并 且 能 够 覆盖 应 用 程序 功能 性 
的 各 个 方面 。 在 工程 中 的 每 一 个 测试 点 都 对 应 着 一 个 指定 的 测试 需求 。TestDirector 还 提 
供 了 直观 和 有 效 的 方式 来 计划 和 执行 测试 集 、 收 集 测试 结果 并 分 析 数 据 。 

TestDirector 还 专门 提供 了 一 个 完善 的 缺陷 跟踪 系统 , 它 能 够 让 用 户 跟踪 缺陷 从 产生 
到 最 终 解决 的 全 过 程 。TestDirector 通过 与 邮件 系统 相关 联 , 缺 陷 跟 踪 的 相关 信息 就 可 以 
被 整个 应 用 开发 组 .QA 、 客 户 支 持 , 负 责 信息 系统 的 人 员 所 共享 。 

TestDirector 提供 了 与 Mercury Interactive 公司 的 测试 工具 (WinRunner，LoadRunner， 
QuickTest Professional. Astra QuickTest, QuickTest Professional for MySAP. com 
Windows Client. Astra LoadTest. XRunner. Visual APIand Visual API-XP) .第 三 方 或 者 
自主 开发 的 测试 工具 、 需 求 和 配置 管理 工具 、 建 模 工 具 的 整合 


功能 。TestDirector 能 够 与 这 些 测试 工具 很 好 地 无 缝 链接 ,为 i 
用 户 提 供 全 套 解决 方案 选择 来 进行 全 部 自动 化 的 应 用 测试 。 
TestDirector 会 指导 用 户 进行 需求 定义 测试 计划 ,测试 执 测试 计划 
行 和 缺陷 跟踪 , 即 整个 测试 过 程 的 各 个 阶段 。 通 过 整合 所 有 的 — 
任务 到 应 用 程序 测试 中 来 确保 客户 收 到 更 高 质量 的 产品 。 — 、 
TestDirector 的 测试 管理 包括 如 下 4 个 阶段 ,如 图 10-26 执行 测试 
Br 。 
(1) 需求 定义 (Specify Requirements): 分 析 应 用 程序 并 perm 
确定 测试 需求 。 
(2) 测试 计划 (Plan Tests) : 基于 测试 需求 ,建立 测试 计划 。 10-26 TestDirector 测试 
(3) 测试 执行 (Execute Tests): 创建 测试 集 (Test Set) JF 管理 的 4 个 阶段 
执行 测试 。 


(4) 缺陷 跟踪 (Track Defects) : 报告 程序 中 产生 的 缺陷 并 跟踪 缺陷 修复 的 全 过 程 。 
10.2.2 安装 TestDirector 


在 安装 盘 下 执行 setup. exe 文件 ,如 图 10-27 所 示 。 


283 


. 
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Bn TestDirector 7.5 Setup 


irector 7.6 


[&-wo-] Ig we] niece 


图 10-27 执行 setup. exe 
单 击 Next 按钮 ,输入 序列 号 , 单 击 Next 按钮 。 
选择 支持 的 数据 库 服务 器 类 型 : MS-SQL Server，Access，Sybase，Oracle, 可 选 一 个 
或 多 个 , 单 击 Next 按钮 ,如 图 10-28 所 示 。 


Š TestDirector 7.6 Setup 


Select the database servers TestDirector will use. Make 
sure the relevart client software is installed on your PC 
before you install TestDirector 


Setting Database Connectivity Fo: 


EZ XS-SQL Server 


O Oracle 


回 Access 


图 10-28 选择 数据 库 


输入 连接 串 , 这 里 采用 默认 的 , 单 击 Next 按钮 ,如 图 10-29 所 示 。 
这 里 验证 用 户 是 否 是 域 用 户 ,请 输入 域 用 户 账号 , 单 击 Next 按钮 ,如 图 10-30 所 示 。 
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šq TestDirector 7.6 Setup 


Before you install TestDirector, you must create 


a 
XS SQL database alias. 

Specify the name of the databasealias as 
TDSQLSERVER. 


For more information, refer to the TestDirector 
Installation guide 


图 10-29 连接 串 


Éq TestDirector 7.6 Setup 


Type the username and password. TestDirector will run using 
the security context of the specified user account in order to 
receive authentication in the user's domain. The user will be 
used to run TestDirector as a service. 


User |HEADFREE Vw ngzh 


Password. 


Confirm Password 


图 10-30 ” 域 用 户 账号 


设置 域 存储 区 的 路 径 , 这 里 保存 了 域 存储 区 的 相关 信息 (建议 使 用 默认 路 径 ) , 单 击 
Next 按钮 ,如 图 10-31 所 示 。 

单 击 Yes 按钮 ,新建 这 个 目录 ,如 图 10-32 所 示 。 

单 击 Yes 按钮 ,共享 这 个 目录 .如 图 10-33 所 示 。 
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Domain Repository 
RepostoryPalh: — [FV pir, 
Please enter ihe location of the domain repository. 
The domain repository stores domain Infomation. 
Ploare use valid characters only 
Avoid using lenguage-specific characters for the 
repository paih name. 
À default domein will be created for you by the setup. 


[s | [3 ie] nce ] 


图 10-31 存储 路 径 


e TO. Dir folder is not a shared folder, 
Do you want to share it? 


图 10-32 确认 信息 


The specified directory does not exist.Create it? 


图 10-33 ”确定 新 建 目录 
设置 共享 目录 名 称 , 单 击 OK 按钮 ,如 图 10-34 所 示 。 


Share directory (C:\TD_Dir\> as : 


Shara Nemai [rn Dix = - _ 


图 10-34 共享 目录 


设置 邮件 服务 : 输入 用 于 发 送 邮件 的 SMTP 服务 名 称 ( 可 以 是 IP) ,或 者 用 系统 IIS 有 
的 SMTP 服务 , 单 击 Next 按钮 ,如 图 10-35 所 示 。 设 置 发 布 Web 的 虚拟 目录 : 输入 虚拟 目 
录 名 称 ,并 指定 物理 安装 位 置 ,使 用 默认 值 后 单 击 Next 按钮 。 

单 击 Yes 按钮 ,创建 这 个 目录 ,如 图 10-36 所 示 。 

设置 是 否 安装 默认 的 工程 , 单 击 Next 按钮 ,如 图 10-37 所 示 。 

这 是 一 个 前 面 设置 的 信息 摘要 .确认 正确 后 , 单 击 Install 按钮 ,如 图 10-38 所 示 。 


如 图 10-39 所 示 , 单 击 Finish 按钮 ,完成 TD 7.6 的 安装 。 重 启 后 生效 ,如 图 10-40 
所 示 。 
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Éq TestDirector 7.6 Setup 


You can select the mail service TestDirector willuse. 
Make sure the relevant software is installed on your PC. 


Select a Mail Service Option 


© SMP Server : 


[ _ IH 


O Microsoft IIS SMTP Service 


[x mu] 


图 10-35 SMTP 服务 名 称 


The specified directory does not exist.Create it? 


图 10-36 ”确认 信息 


Š TestDirector 7.6 Setup 


TestDirector Demonstration. 


To help you get started with TestDirector, you can choose to 
install the following. 


回 TestDirector Demonstration Project 


回 XexcurzTowrs (Tomcat version 3.3 installation] 


Note that to use the TestDirector tutorial, you must install both. 
options. 


图 10-37 设置 是 否 安装 默认 的 工程 
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`. 


X TestDirector 7.6 Setup 


Setup Summary 


Setup has enough information to start copying the necessary 
MEL files.If you wart to review or change any settings, click Back. 
x Otherwise, click Instal to begin copying files. 


Current Settings: 


[Database Serrers: 
Access 


[Domin Repository 
MHIEVID Dir 


[Virtual Directory 

Virtual Directory Name : TDBIN 
Physical Locstion : C VInetPub|TDDIN 
URL ; http://ħjh/TDBIN/ default. htm 


Mail Service 
YAPI NS Exchange RE 


ano 


q Mek h Install W EC 


10-38 ”信息 摘要 


Š TestDirector 7.6 Setup y 


Web Address. 


Congratulations ! 
[You have successfully completed the installation of 
| lrestpirector 7.5 
[Users with access to your web server can now enter 
TariDivactor 7.6 from thair brcwrer by entering the 
following adéress: 
http: //&J E/IDBIN/ default. htm 


10-39 ”安装 完成 


You must restart your computer before the new settings wil take effect. 
Do you want to restart your computer now? 


10-40 重启 计算 机 
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10.2.3 创建 项 目 


双击 TestDirector 图 标 ,如 图 10-41 所 示 。 


2: TestDirector 7.6 Qi 


图 10-41 启动 TestDirector 


单 击 Site Administrator 链接 ,进入 站 点 管理 的 登录 界面 ,如 图 10-42 所 示 o 


口 meremeer ressrmm 


10-42 ”站 点 管理 的 登录 界面 


单 击 Login 按钮 ,进入 站 点 管理 的 主 界面 ,如 图 10-43 所 示 。 

在 主 界面 中 单 击 Create 按钮 ,弹出 Greate Project 对 话 框 ,如 图 10-44 所 示 。 

默认 项 目 名 称 为 以 “TD_” 为 前 导 字 符 , 可 以 更 改 , 例 如 “TD_KM”, 当然 这 个 名 称 可 任 
意 输入 ,但 要 保证 唯一 ,选择 数据 类 型 ,如 MS-SQL, 单 击 Next 按钮 。 

如 图 10-45 所 示 , 输 入 本 地 数据 库 的 用 户 名 和 密码 ( 若 本 地 服务 器 的 名 称 不 是 
TDSQLSERVER, 则 需要 在 SQL Server 的 客户 端 网 络 使 用 工具 中 建立 别名 TDSQLSERVER)， 
单 击 Next 按钮 。 


=... uw 


图 10-43 ”站 点 管理 的 主 界面 


Create Project 


图 10-44 新 建 项 目 图 10-45 输入 本 地 数据 库 的 用 户 名 和 密码 


单 击 Create 按钮 就 新 建 了 一 个 项 目 ,如 图 10-46 所 示 。 

如 果 项 目 是 要 从 已 存在 的 项 目 复制 ,那么 在 新 建 对 话 框 中 单 击 Copy 按钮 ,如 图 10-47 
所 示 。 

在 Project 选择 框 中 选择 要 复制 的 项 目 , 选 择 要 复制 哪些 类 型 的 数据 后 单 击 Copy 按钮 
创建 。 


m 
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图 10-46 ”完成 新 建 项 目 图 10-47 从 已 存在 的 项 目 复制 


10.2.4 定制 项 目 模块 ,加 入 用 户 和 授权 
登录 TestDirector, 单 击 “ 自 定义 ”按钮 ,进入 工程 的 界面 ,如 图 10-48 所 示 。 


图 10-48 选择 创建 的 项 目 


在 Project 中 选择 创建 的 项 目 ,输入 用 户 名 和 密码 ,密码 为 空 , 单 击 OK 按钮 进入 项 目 定 
制 页 面 ,如 图 10-49 所 示 。 

配置 工程 字段 : 单 击 Customize Project Entities 链接 ,如 图 10-50 所 示 。 

这 里 有 7 个 表 , 每 个 表 中 的 字段 分 为 系统 字段 (System Fields) 和 用 户 字段 (User 
Fields) ,如 图 10-51 所 示 。 

选择 DEFECT-- User Fields 节点 , 单 击 底部 的 New Field 按钮 ,如 图 10-52 所 示 。 

输入 字段 名 称 和 数据 类 型 ,并 选择 显示 模式 ,增加 完 后 , 单 击 OK 按钮 返回 。 

定制 项 目的 模块 分 类 : 单 击 Customize Project Lists 进入 定制 列表 框 , 如 图 10-53 
所 示 。 

在 Lists 中 选择 All Projects, 单 击 New List 按钮 ,弹出 New Item 对 话 框 ,如 图 10-54 
所 示 。 


图 10-49 项 目 定制 页 面 


10-50 配置 工程 字段 
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Customize Project Entities 


[- Project Entities 


El- FE] DEFECT 


(e 
F TEST 
[E] TEST STEP 
H-E mu 
c-[Ef] REQUIREMENT 
B FE] TEST IN TESTSET 
由 -图 TESTSET 


H-E System Fields 


图 10-51 系统 字段 和 用 户 字 段 


Customize Project Entities 


E ED DEFECT 
-全 System Fields 
HE) Vser Fields 
ji BG USER O1 
BG USER 02 
F Test 
W-E TEST STEP 
E Rw 
[E REQUIREMENT 
田 国 TEST IN TESTSET 
J.E) TESTSET 


[ Project Entities 


p Field Settings 


Field Name BG USER 03 


Field Labelbc USER 03 
Field Type | String Z 


[O History OD Required 


New Field | 


[Fenove Tiela] 


图 10-52 用 户 字段 
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输入 条 目 名 称 , 然 后 单 击 OK 按钮 返回 。 

如 图 10-55 所 示 ,选择 增加 进来 的 条 目 , 单 击 New Sub-Item 按钮 弹出 增加 条 目 对 话 框 。 
输入 条 目 名 称 , 单 击 OK 按钮 返回 。 重 复 以 上 操作 完成 项 目 各 模块 的 加 入 ,完成 后 返回 定制 
主 界面 。 


10-55 条目 对 话 框 
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10.2.5 Defect 的 使 用 


打开 TestDirector 链接 ,进入 工程 管理 的 界面 。 选 择 项 目 ,输入 用 户 名 和 密码 ,登录 后 
进入 缺陷 管理 页 面 单 击 工具 条 上 的 Add Defect 按钮 ,打开 Add Defect 对 话 框 , 如 图 10-56 
和 图 10-57 所 示 。 


.. Testbirector 7.6 


r— 


10-57 ”增加 缺陷 
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输入 摘要 项目、 描述 .严重 等 级 优先 等 级 ,标题 等 信息 。 顶 上 有 一 排 按钮 ,分 别 是 : 清 
除 (Clear) 、 附 件 (Attach) (依次 是 文件 , Web 页 面 , 屏 幕 照相 ,系统 信息 ) 查找 相似 缺陷 


(Find similar defects) 。 


(gsm 


. 请 简要 介绍 缺陷 管理 工具 软件 Mantis。 它 有 什么 特点 ? 
. 通过 实例 练习 使 用 缺陷 管理 工具 软件 Mantis, 

. 请 简要 介绍 综合 管理 工具 软件 TestDirector。 

. TestDirector 的 测试 管理 包括 哪 几 个 阶段 ? 

. 通过 实例 练习 使 用 综合 管理 工具 软件 TestDirector。 


mm = wuye 


软件 测试 常用 术语 表 | 


A. 

Acceptance Testing 可 接受 性 测试 

一 般 由 用 户 / 客 户 进行 的 确认 是 否 可 以 接受 一 个 产品 的 验证 性 测试 。 

Actual Outcome 一 一 实际 结果 

被 测 对 象 在 特定 的 条 件 下 实际 产生 的 结果 。 

Ad Hoc Testing 一 一 随机 测试 

测试 人 员 通 过 随机 地 尝试 系统 的 功能 ,试图 使 系统 中 断 。 

Algorithm 一 一 算法 

COD 一 个 定义 好 的 有 限 规则 集 , 用 于 在 有 限 步骤 内 解决 一 个 问题 ; 

(2) 执行 一 个 特定 任务 的 任何 操作 序列 。 

Algorithm Analysis 一 一 算法 分 析 

一 个 软件 的 验证 确认 任务 ,用 于 保证 选择 的 算法 是 正确 的 、 合 适 的 和 稳定 的 ,并 且 满 足 
所 有 精确 性 、 规 模 和 时 间 方 面 的 要 求 。 

Alpha Testing 一 一 Alpha 测试 

由 选 定 的 用 户 进行 的 产品 早期 性 测试 。 这 个 测试 一 般 在 可 控制 的 环境 下 进行 。 

Analysis 分 析 

(1) 分 解 到 一 些 原子 部 分 或 基本 原则 ,以 便 确定 整体 的 特性 ; 

(2) 一 个 推理 的 过 程 ,显示 一 个 特定 的 结果 是 假设 前 提 的 结果 ; 

(3) 一 个 问题 的 方法 研究 ,并 且 问 题 被 分 解 为 一 些小 的 相关 单元 做 进一步 详细 研究 。 

Anomaly 异常 

在 文档 或 软件 操作 中 观察 到 的 任何 与 期 望 违背 的 结果 。 
应 用 软件 


Application Software 
满足 特定 需要 的 软件 。 
构架 

一 个 系统 或 组 件 的 组 织 结构 。 

ASQ 一 一 自动 化 软件 质量 (Automated Software Quality) 

使 用 软件 工具 来 提高 软件 的 质量 。 

Assertion 一 一 断言 

指定 一 个 程序 必须 已 经 存在 的 状态 的 一 个 逻辑 表达 式 ,或 者 一 组 程序 变量 在 程序 执行 
期 间 的 某 个 点 上 必须 满足 的 条 件 。 


Architecture 
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Assertion Checking 一 一 断言 检查 

用 户 在 程序 中 嵌入 的 断言 的 检查 。 

Audit 审计 

一 个 或 一 组 工作 产品 的 独立 检查 以 评价 与 规格 标准、 契约 或 其 他 准则 的 符合 程度 。 

Audit Trail 一 一 审计 跟踪 

系统 审计 活动 的 一 个 时 间 记录 。 

Automated Testing 一 一 自动 化 测试 

使 用 自动 化 测试 工具 来 进行 测试 ,这 类 测试 一 般 不 需要 人 干预 ,通常 在 GUI,\ 性 能 等 测 
试 中 用 得 较 多 。 

B. 

Backus-Naur Form BNF 范式 

一 种 分 析 语 言 , 用 于 形式 化 描述 语言 的 语法 。 

Baseline 基线 

一 个 已 经 被 正式 评审 和 批准 的 规格 或 产品 , 它 作为 进一步 开发 的 一 个 基础 ,并 且 必 须 通 
过 正式 的 变更 流程 来 变更 。 

Basic Block 一 一 基本 块 

一 个 或 多 个 顺序 的 可 执行 语句 块 ,不 包含 任何 分 支 语 句 。 

Basis Test Set 一 一 基本 测试 集 

根据 代码 逻辑 引出 来 的 一 个 测试 用 例 集合 , 它 保证 能 获得 100 26 AYA SCTHE i o 

Behaviour 一 一 行为 

对 于 一 个 系统 的 一 个 函数 的 输入 和 预 秆 条 件 组 合 以 及 需要 的 反应 。 一 个 函数 的 所 有 规 
格 包含 一 个 或 多 个 行为 。 


Benchmark 一 一 标杆 /指标 /基准 
一 个 标准 ,根据 该 标准 可 以 进行 度量 或 比较 。 
Beta Testing Beta 测试 


在 客户 场地 ,由 客户 进行 的 对 产品 预 发 布 版 本 的 测试 。 这 个 测试 一 般 是 不 可 控 的 。 

Big-Bang Testing 一 一 大 锤 测试 /一 次 性 集成 测试 

非 渐 增 式 集成 测试 的 一 种 策略 ,测试 的 时 候 把 所 有 系统 的 组 件 一 次 性 组 合成 系统 进行 
测试 。 

Black Box Testing 一 一 黑 盒 测试 

根据 软件 的 规格 对 软件 进行 的 测试 ,这 类 测试 不 考虑 软件 内 部 的 运作 原理 ,因此 软件 对 
用 户 来 说 就 像 一 个 黑 盒 子 。 

Bottom-Up Testing 一 一 由 底 向 上 测试 

渐 增 式 集成 测试 的 一 种 ,其 策略 是 先 测试 底 层 的 组 件 , 然 后 逐步 加 入 较 高 层次 的 组 件 进 
行 测试 ,直到 系统 所 有 组 件 都 加 入 系统 。 

Boundary Value 边界 值 

一 个 输入 或 输出 值 , 它 处 在 等 价 类 的 边界 上 。 

Boundary Value Coverage 边界 值 覆盖 

通过 测试 用 例 ,测试 组 件 等 价 类 的 所 有 边界 值 。 
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Boundary Value Testing 边界 值 测 试 
通过 边界 值 分 析 方 法 来 生成 测试 用 例 的 一 种 测试 策略 。 
边界 值 分 析 

该 分 析 一 般 与 等 价 类 一 起 使 用 。 经 验 认为 软件 的 错误 经 常 在 输入 的 边界 上 产生 ,因此 
边界 值 分 析 就 是 分 析 软 件 输入 边界 的 一 种 方法 。 

Branch 分 支 

在 组 件 中 ,控制 从 任何 语句 到 其 他 任何 非 直接 后 续 语 句 的 一 个 条 件 转换 ,或 者 是 一 个 无 
条 件 转换 。 

Branch Condition 一 一 分 支 条 件 


Branch Condition Combination Coverage 


Boundry Value Analysis 


分 支 条 件 组 合 覆盖 
在 每 个 判定 中 所 有 分 支 条 件 结果 组 合 被 测试 用 例 覆 盖 到 的 百分比 。 
Branch Condition Combination Testing 一 一 分 支 条 件 组 合 测试 
通过 执行 分 支 条 件 结果 组 合 来 设计 测试 用 例 的 一 种 方法 。 

Branch Condition Coverage 一 一 分 支 条 件 覆 盖 

每 个 判定 中 分 支 条 件 结果 被 测试 用 例 覆 盖 到 的 百分比 。 

Branch Condition Testing 一 一 分 支 条 件 测 试 

通过 执行 分 支 条 件 结果 来 设计 测试 用 例 的 一 种 方法 。 

Branch Coverage—— 4) 3c $8 sti 

通过 测试 执行 到 的 分 支 的 百分比 。 

Branch Outcome 一 一 分 支 结果 

见 判定 结果 (Decision Outcome) 。 

Branch Point 一 一 分 支点 

见 判定 (Decision) 。 

Branch Testing 一 一 分 支 测试 

通过 执行 分 支 结果 来 设计 测试 用 例 的 一 种 方法 。 

Breadth Testing 一 一 广度 测试 

在 测试 中 测试 一 个 产品 的 所 有 功能 ,但 是 不 测试 更 细节 的 特性 。 

Bug 一 一 缺陷 

G 

Capture/Playback Tool 一 一 捕获 /回放 工具 

参考 Capture/Replay Tool。 

Capture/Replay Tool 一 一 捕获 /回放 工具 

一 种 测试 工具 ,能 够 捕获 在 测试 过 程 中 传递 给 软件 的 输入 ,并 且 能 够 在 以 后 的 时 间 中 ， 
重复 这 个 执行 的 过 程 。 这 类 工具 一 般 在 GUI 测试 中 用 得 较 多 。 

CASE 一 一 计算 机 辅助 软件 工程 (Computer Aided Software Engineering) 

用 于 支持 软件 开发 的 一 个 自动 化 系统 。 

CAST 一 一 计算 机 辅助 测试 

在 测试 过 程 中 使 用 计算 机 软件 工具 进行 辅助 的 测试 。 

Cause-Effect Graph 一 一 因果 图 
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一 个 图 形 ,用 来 表示 输入 (原因 ) 与 结果 之 间 的 关系 ,可 以 被 用 来 设计 测试 用 例 。 

Certification 一 一 证 明 

一 个 过 程 ,用 于 确定 一 个 系统 或 组 件 与 特定 的 需求 相 一 致 。 

Change Control 变更 控制 

一 个 用 于 计算 机 系统 或 系统 数据 修改 的 过 程 , 该 过 程 是 质量 保证 程序 的 一 个 关键 子 集 ， 
需要 被 明确 地 描述 。 

Code Audit 一 一 代码 审计 

由 一 个 人 、 组 或 工具 对 源 代 码 进行 的 一 个 独立 的 评审 ,以 验证 其 与 设计 规格 .程序 标准 
的 一 致 性 。 正 确 性 和 有 效 性 也 会 被 评价 。 

Code Coverage 代码 覆盖 

一 种 分 析 方法 ,用 于 确定 在 一 个 测试 套 执行 后 ,软件 的 哪些 部 分 被 执行 到 了 ,哪些 部 分 
没有 被 执行 到 。 

Code Inspection 一 一 代码 检视 

一 个 正式 的 同行 评审 手段 ,在 该 评审 中 ,作者 的 同行 根据 检查 表 对 程序 的 迎 辑 进行 提 
问 , 并 检查 其 与 编码 规范 的 一 致 性 。 

Code Walkthrough 一 一 代码 走读 

一 个 非 正 式 的 同行 评审 手段 ,在 该 评审 中 ,代码 被 使 用 一 些 简单 的 测试 用 例 进行 人 工 执 
行 ,程序 变量 的 状态 被 手工 分 析 , 以 分 析 程序 的 逻辑 和 假设 。 

Code-Based Testing 一 一 基于 代码 的 测试 

根据 从 实现 中 引出 的 目标 设计 测试 用 例 。 

Coding Standards 一 一 编程 规范 

一 些 编程 方面 需要 遵循 的 标准 ,包括 命名 方式 ,排版 格式 等 内 容 。 

Compatibility Testing 一 一 兼容 性 测试 

测试 软件 是 否 和 系统 的 其 他 与 之 交互 的 元 素 之 间 兼 容 , 如 浏览 器 .操作 系统 、 硬 件 等 。 

Complete Path Testing 一 一 完全 路 径 测试 

参考 穷尽 测试 (Exhaustive Testing) 。 

Completeness 完整 性 

实体 的 所 有 必需 部 分 必须 被 包含 的 属性 。 

Complexity 一 一 复杂 性 

系统 或 组 件 难 于 理解 或 验证 的 程度 。 


Component 组 件 

一 个 最 小 的 软件 单元 ,有 着 独立 的 规格 。 
Component Testing 一 一 组 件 测试 

参考 单元 测试 。 

Computation Data Use 计算 数据 使 用 
一 个 不 在 条 件 中 的 数据 使 用 。 


Computer System Security 计算 机 系统 安全 性 
计算 机 软件 和 硬件 对 偶然 的 或 故意 的 访问 、 使 用 、 修 改 或 破坏 的 一 种 保护 机 制 。 
条 件 


Condition 
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一 个 不 包含 布尔 操作 的 布尔 表达 式 , 例 如 : A。 
Condition Coverage 条 件 覆 盖 
通过 测试 执行 到 的 条 件 的 百分比 。 


Condition Outcome 条 件 结 果 
条 件 为 真 为 假 的 评价 。 
Configuration Control 配置 控制 


配置 管理 的 一 个 方面 ,包括 评价 协调、 批准 和 实现 配置 项 的 变更 。 

Configuration Management 配置 管理 

一 套 技术 和 管理 方面 的 原则 用 于 确定 和 文档 化 一 个 配置 项 的 功能 和 物理 属性 、 控 制 对 
这 些 属性 的 变更 ,记录 和 报告 变更 处 理 和 实现 的 状态 ,以 及 验证 与 指定 需求 的 一 致 性 。 

Conformance Criterion 一 一 一 致 性 标准 

判断 组 件 在 一 个 特定 输入 值 上 的 行为 是 否 符合 规格 的 一 种 方法 。 


Conformance Testing 一 一 一 致 性 测试 
测试 一 个 系统 的 实现 是 否 和 其 基于 的 规格 相 一 致 的 测试 。 
Consistency 一 一 一 致 性 


在 系统 或 组 件 的 各 组 成 部 分 和 文档 之 间 没 有 矛盾 ,一 致 的 程度 。 
Consistency Checker 一 一 一 致 性 检查 器 

一 个 软件 工具 ,用 于 测试 设计 规格 中 需求 的 一 致 性 和 完整 性 。 
Control Flow 一 一 控制 流 

程序 执行 中 所 有 可 能 的 事件 顺序 的 一 个 抽象 表示 。 

Control Flow Graph 一 一 控制 流 图 

通过 一 个 组 件 的 可 能 蔡 换 控制 流 路 径 的 一 个 图 形 表示 。 
Conversion Testing 一 一 转换 测试 

用 于 测试 已 有 系统 的 数据 是 否 能 够 转换 到 替代 系统 上 的 一 种 测试 。 
Corrective Maintenance 故障 检修 

用 于 纠正 硬件 或 软件 中 故障 的 维护 。 


Correctness 正确 性 
软件 遵从 其 规格 的 程度 。 
Correctness 正确 性 


软件 在 其 规格 、 设 计 和 编码 中 没有 故障 的 程度 。 软 件 、 文 档 和 其 他 项 满足 需求 的 程度 。 
软件 ,文档 和 其 他 项 满足 用 户 明 显 的 和 隐 含 的 需求 的 程度 。 


Coverage 盖 率 
用 于 确定 测试 所 执行 到 的 覆盖 项 的 百分比 。 
Coverage Item 覆盖 项 


作为 测试 基础 的 一 个 人口 或 属性 : 如 语句 、 分 支 、 条 件 等 。 

Crash HI 

TETEBL AR SSK AH PE AE PR JF SC A Hh qe KO E , 

Criticality 一 一 关键 性 

需求 ,模块 错误、 故障 、 失 效 或 其 他 项 对 一 个 系统 的 操作 或 开发 影响 的 程度 。 
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Criticality Analysis 关键 性 分 析 
需求 的 一 种 分 析 , 它 根据 需求 的 风险 情况 给 每 个 需求 项 分 配 一 个 关键 级 别 。 


Cyclomatic Complexity 循环 复杂 度 
一 个 程序 中 独立 路 径 的 数量 。 


D. 
Data Corruption 一 一 数据 污染 
违背 数据 一 致 性 的 情况 。 
Data Definition 一 一 数据 定义 
一 个 可 执行 语句 ,在 该 语句 上 一 个 变量 被 赋予 了 一 个 值 。 
Data Definition C-Use Coverage 数据 定义 C-Use 覆盖 
在 组 件 中 被 测试 执行 到 的 数据 定义 C-Use 使 用 对 的 百分比 。 
Data Definition C-Use Pair 数据 定义 C-Use 使 用 对 
一 个 数据 定义 和 一 个 计算 数据 使 用 ,数据 使 用 的 值 是 数据 定义 的 值 。 
Data Definition P-Use Coverage 一 一 数据 定义 P-Use fH sit 
在 组 件 中 被 测试 执行 到 的 数据 定义 P-Use 使 用 对 的 百分比 。 
Data Definition P-Use Pair 一 一 数据 定义 P-Use 使 用 对 
一 个 数据 定义 和 一 个 条 件数 据 使 用 ,数据 使 用 的 值 是 数据 定义 的 值 。 
Data Definition-Use Coverage 一 一 数据 定义 使 用 覆盖 
在 组 件 中 被 测试 执行 到 的 数据 定义 使 用 对 的 百分比 。 
Data Definition-Use Pair 一 一 数据 定义 使 用 对 
一 个 数据 定义 和 一 个 数据 使 用 ,数据 使 用 的 值 是 数据 定义 的 值 。 
Data Definition-Use Testing 一 一 数据 定义 使 用 测试 
以 执行 数据 定义 使 用 对 为 目标 进行 测试 用 例 设计 的 一 种 技术 。 
Data Dictionary 一 一 数据 字典 
(1) 一 个 软件 系统 中 使 用 的 所 有 数据 项 名 称 , 以 及 这 些 项 相关 属性 的 集合 。 
(2) 数据 流 、 数 据 元 素 ,文件 ,数据 基础 和 相关 处 理 的 一 个 集合 。 
数据 流 分 析 
一 个 软件 验证 和 确认 过 程 ,用 于 保证 输入 和 输出 数据 和 它们 的 格式 是 被 适当 定义 的 ,并 
且 数据 流 是 正确 的 。 
Data Flow Coverage 数据 流 覆 盖 
测试 覆盖 率 的 度量 是 根据 变量 在 代码 中 的 使 用 情况 。 
Data Flow Diagram 数据 流 图 
把 数据 源 .数据 接受 .数据 存储 和 数据 处 理 作 为 节点 描述 的 一 个 图 形 ,数据 之 间 的 逻辑 
体现 为 节点 之 间 的 边 。 
Data Flow Testing 数据 流 测 试 
根据 代码 中 变量 的 使 用 情况 进行 的 测试 。 
Data Integrity 数据 完整 性 
一 个 数据 集合 完全 正确 和 一 致 的 程度 。 
Data Use 数据 使 用 


Data Flow Analysis 
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一 个 可 执行 的 语句 ,在 该 语句 中 ,变量 的 值 被 访问 。 
Data Validation 一 一 数据 确认 
用 于 确认 数据 不 正确 \ 不 完整 和 不 合理 的 过 程 。 


Dead Code 一 一 死 代 码 

在 程序 操作 过 程 中 永远 不 可 能 被 执行 到 的 代码 。 

Debugging 调试 

发 现 和 去 除 软 件 失 效 根源 的 过 程 。 

Decision 判定 

一 个 程序 控制 点 ,在 该 控制 点 上 ,控制 流 有 两 个 或 多 个 可 蔡 换 路 由 。 
Decision Condition 判定 条 件 

判定 内 的 一 个 条 件 。 

Decision Coverage 判定 覆盖 


在 组 件 中 被 测试 执行 到 的 判定 结果 的 百分比 。 

Decision Outcome 一 一 判定 结果 

一 个 判定 的 结果 ,决定 控制 流 走 哪 条 路 径 。 

Decision Table 一 一 判定 表 

一 个 表格 ,用 于 显示 条 件 和 条 件 导致 动作 的 集合 。 

Depth Testing 一 一 深度 测试 

执行 一 个 产品 的 一 个 特性 的 所 有 细节 ,但 不 测试 所 有 特性 。 比 较 广度 测试 。 
Design Of Experiments 一 一 实验 设计 

一 种 计划 实验 的 方法 ,这 样 适合 分 析 的 数据 可 以 被 收集 。 
Design-Based Testing 一 一 基于 设计 的 测试 

根据 软件 的 构架 或 详细 设计 引出 测试 用 例 的 一 种 方法 。 
Desk Checking 一 一 桌面 检查 

通过 手工 模拟 软件 执行 的 方式 进行 测试 的 一 种 方式 。 


Diagnostic 诊断 
检测 和 隔离 故障 或 失效 的 过 程 。 


Dirty Testing 一 一 脏 脏 测试 

参考 负面 测试 (Negative Testing) 。 

Disaster Recovery 灾难 恢复 

一 个 灾难 的 恢复 和 重建 过 程 或 能 力 。 
Documentation Testing 一 一 文档 测试 

测试 关注 于 文档 的 正确 性 。 

域 

值 被 选择 的 一 个 集合 。 

Domain Testing 一 一 域 测试 

参考 等 价 划分 测试 (Equivalence Partition Testing) 。 
Dynamic Analysis 动态 分 析 

根据 执行 的 行为 评价 一 个 系统 或 组 件 的 过 程 。 


Domain 
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Dynamic Testing 一 一 动态 测试 

通过 执行 软件 的 手段 来 测试 软件 。 

E. 

Embedded Software RARI 

软件 运行 在 特定 硬件 设备 中 ,不 能 独立 于 硬件 存在 。 这 类 系统 一 般 要 求实 时 性 较 高 。 
仿真 

一 个 模仿 另 一 个 系统 的 系统 或 设备 , 它 接收 相同 的 输入 并 产生 相同 的 输出 。 
End-To-End Testing 端 到 端 测试 

在 一 个 模拟 现实 使 用 的 场景 下 测试 一 个 完整 的 应 用 环境 ,例如 和 数据 库 交互 ,使 用 网 络 


Emulator 


通信 等 。 


Entity Relationship Diagram 实体 关系 图 

描述 现实 世界 中 实体 及 它们 关系 的 图 形 。 

Entry Point 入口 点 

一 个 组 件 的 第 一 个 可 执行 语句 。 

Equivalence Class 等 价 类 

组 件 输入 或 输出 域 的 一 个 部 分 ,在 该 部 分 中 ,组 件 的 行为 从 组 件 的 规格 上 来 看 认为 是 相 


同 的 。 


Equivalence Partition Coverage 一 一 等 价 划 分 覆盖 

在 组 件 中 被 测试 执行 到 的 等 价 类 的 百分比 。 

Equivalence Partition Testing 一 一 等 价 划 分 测试 

根据 等 价 类 设计 测试 用 例 的 一 种 技术 。 

Equivalence Partitioning 一 一 等 价 划分 

组 件 的 一 个 测试 用 例 设 计 技 术 ,该 技术 从 组 件 的 等 价 类 中 选取 典型 的 点 进行 测试 。 


Error 一 一 错误 
IEEE 的 定义 是 : 一 个 人 为 产生 不 正确 结果 的 行为 。 


Error Guessing 错误 猜测 

根据 测试 人 员 以 往 的 经 验 猜 测 可 能 出 现 问 题 的 地 方 来 进行 用 例 设 计 的 一 种 技术 。 
Error Seeding 一 一 错误 播种 /错误 插值 

故意 插入 一 些 已 知 故障 (Fault) 到 一 个 系统 中 去 的 过 程 ,目的 是 为 了 根据 错误 检测 和 跟 


踪 的 效率 并 估计 系统 中 遗留 缺陷 的 数量 。 


Exception 一 一 异常 /例外 

一 个 引起 正常 程序 执行 挂 起 的 事件 。 

Executable Statement 可 执行 语句 

一 个 语句 在 被 编译 后 会 转换 成 目标 代码 , 当 程 序 运行 时 会 被 执行 ,并 且 可 能 对 程序 数据 


产生 动作 。 


Exhaustive Testing 一 一 穷尽 测试 
测试 覆盖 软件 的 所 有 输入 和 条 件 组 合 。 
Exit Point 一 一 出 口 点 

一 个 组 件 的 最 后 一 个 可 执行 语句 。 
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Expected Outcome 期 望 结果 
参考 预期 结果 (Predicted Outcome) 。 


F. 

Failure 失效 

软件 的 行为 与 其 期 望 的 服务 相 背 离 。 
Fault 一 一 故障 


在 软件 中 一 个 错误 的 表现 。 

Feasible Path 可 达 路 径 

可 以 通过 一 组 输入 值 和 条 件 执行 到 的 一 条 路 径 。 

Feature Testing 一 一 特性 测试 

参考 功能 测试 (Functional Testing) 。 

FMEA 一 一 失效 模型 效果 分 析 (Failure Modes And Effects Analysis) 

可 靠 性 分 析 中 的 一 种 方法 ,用 于 在 基本 组 件 级 别 上 确认 对 系统 性 能 有 重大 影响 的 失效 。 
FMECA 一 一 失效 模型 效果 关键 性 分 析 (Failure Modes And Effects Criticality Analysis) 
FMEA 的 一 个 扩展 , 它 分 析 了 失效 结果 的 严重 性 。 

FTA 一 一 故障 树 分 析 (Fault Tree Analysis) 

引起 一 个 不 需要 事件 产生 的 条 件 和 因素 的 确认 和 分 析 ,通常 是 严重 影响 系统 性 能 、 经 济 


人 性、 安全 性 或 其 他 需要 特性 。 


Functional Decomposition 一 一 功能 分 解 

参考 模块 分 解 (Modular Decomposition) 

Functional Specification 一 一 功能 规格 说 明 书 

一 个 详细 描述 产品 特性 的 文档 。 

Functional Testing 一 一 功能 测试 

测试 一 个 产品 的 特性 和 可 操作 行为 以 确定 它们 满足 规格 。 
G. 

Glass Box Testing 一 一 玻璃 盒 测 试 

B% AAM White Box Testing). 

I. 

IEEE 一 一 美国 电子 与 电器 工程 师 学 会 (Institute Of Electrical And Electronic Engineers) 
Incremental Testing 一 一 渐 增 测试 

集成 测试 的 一 种 ,组件 逐 渐 被 增加 到 系统 中 直到 整个 系统 被 集成 。 
Infeasible Path 不 可 达 路 径 

不 能 够 通过 任何 可 能 的 输入 值 集合 执行 到 的 路 径 。 

Input Domain 输入 域 

所 有 可 能 输入 的 集合 。 

Inspection 一 一 检视 

对 文档 进行 的 一 种 评审 形式 。 

Installability Testing 可 安装 性 测试 

确定 系统 的 安装 程序 是 否 正确 的 测试 。 
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Instrumentation 插 装 
在 程序 中 插入 额外 的 代码 以 获得 程序 在 执行 时 行为 的 信息 。 
插 装 器 


Instrumenter 
执行 择 装 的 工具 。 

Integration Testing 一 一 集成 测试 

测试 一 个 应 用 组 合 后 的 部 分 以 确保 它们 的 功能 在 组 合 之 后 正确 。 该 测试 一 般 在 单元 测 


试 之 后 进行 。 
Interface 接口 
两 个 功能 单元 的 共享 边界 。 


Interface Analysis 接口 分 析 

分 析 软 件 与 硬件 .用户 和 其 他 软件 之 间接 口 的 需求 规格 。 

Interface Testing 一 一 接口 测试 

测试 系统 组 件 间 接口 的 一 种 测试 。 

Invalid Inputs 无 效 输入 

在 程序 功能 输入 域 之 外 的 测试 数据 。 

Isolation Testing 一 一 孤立 测试 

组 件 测试 (单元 测试 ) 策 略 中 的 一 种 ,把 被 测 组 件 从 其 上 下 文 组 件 之 中 孤立 出 来 ,通过 设 


计 驱 动 和 桩 进行 测试 的 一 种 方法 。 


Jokb 一 一 工作 

一 个 用 户 定义 的 要 计算 机 完成 的 工作 单元 。 

Job Control Language 一 一 工作 控制 语言 

用 于 确定 工作 顺序 ,描述 它们 对 操作 系统 要 求 并 控制 它们 执行 的 语言 。 

L. 

LCSAJ 一 一 线性 代码 顺序 和 跳 转 (Linear Code Sequence And Jump) 

包含 三 个 部 分 : 可 执行 语句 线性 顺序 的 起 始 ,线性 顺序 的 结束 ,在 线性 顺序 结束 处 控制 


流 跳 转 的 目标 语句 。 


LCSAJ Coverage LCSAJ fH sti 

在 组 件 中 被 测试 执行 到 的 LCSAJ 的 百分比 。 

LCSAJ Testing — LCSAJ 测试 

根据 LCSAJ 设计 测试 用 例 的 一 种 技术 。 

Load Testing 一 一 负载 测试 

通过 测试 系统 在 资源 超 负荷 情况 下 的 表现 ,以 发 现 设 计 上 的 错误 或 验证 系统 的 负载 


能 力 。 


Logic Analysis 逻辑 分 析 

(1) 评价 软件 设计 的 关键 安全 方程 式 、 算 法 和 控制 逻辑 的 方法 。 
(2) 评价 程序 操作 的 顺序 并 且 检 测 可 能 导致 灾难 的 错误 。 
Logic-Coverage Testing — j 48 # w WIJ iXX 

参考 结构 化 测试 用 例 设 计 (Structural Test Case Design) 。 
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M. 

Maintainability 可 维护 性 

一 个 软件 系统 或 组 件 可 以 被 修改 的 容易 程度 ,这 个 修改 一 般 是 因为 缺陷 纠正 、 性 能 改进 
或 特性 增加 引起 的 。 

Maintainability Testing 可 维护 性 测试 

测试 系统 是 否 满足 可 维护 性 目标 。 

Modified Condition/Decision Coverage 修改 条 件 / 判 定 覆 盖 

在 组 件 中 被 测试 执行 到 的 修改 条 件 / 判 定 的 百分比 。 

Modified Condition/Decision Testing 一 一 修改 条 件 / 判 定 测试 

根据 MC/DC 设计 测试 用 例 的 一 种 技术 。 

Monkey Testing 一 一 跳跃 式 测试 

随机 性 ,跳跃 式 地 测试 一 个 系统 ,以 确定 一 个 系统 是 否 会 月 溃 。 

MTBF 一 一 平均 失效 间隔 时 间 (Mean Time Between Failures) 

两 次 失效 之 间 的 平均 操作 时 间 。 

MTTF 一 一 平均 失效 时 间 (Mean Time To Failure) 

第 一 次 失效 之 前 的 平均 时 间 。 

MTTR 一 一 平均 修复 时 间 (Mean Time To Repair) 

两 次 修复 之 间 的 平均 时 间 。 

Multiple Condition Coverage 一 一 多 条 件 覆 盖 

参考 分 支 条 件 组 合 覆 盖 (Branch Condition Combination Coverage) 。 

Mutation Analysis 一 一 变 体 分 析 

一 种 确定 测试 用 例 套 完整 性 的 方法 ,该 方法 通过 判断 测试 用 例 套 能 够 区 别 程序 与 其 变 


体 之 间 的 程度 。 
N, 
Negative Testing 一 一 逆向 测试 / 反 向 测试 /负面 测试 
测试 瞄准 于 使 系统 不 能 工作 。 


Non-Functional Requirements Testing 一 一 非 功能 性 需求 测试 

与 功能 不 相关 的 需求 测试 ,如 性 能 测试 .可 用 性 测试 等 。 

N-Switch Coverage N 切换 覆盖 

在 组 件 中 被 测试 执行 到 的 N 转换 顺序 的 百分比 。 

N-Switch Testing 一 一 N 切换 测试 

根据 N 转换 顺序 设计 测试 用 例 的 一 种 技术 ,经 常用 于 状态 转换 测试 中 。 
N 转换 


N-Transitions 
N 十 1 转换 顺序 。 

0. 

Operational Testing 可 操作 性 测试 

在 系统 或 组 件 操作 的 环境 中 评价 它们 的 表现 。 
Output Domain 输出 域 

所 有 可 能 输出 的 集合 。 
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p. 

Partition Testing 一 一 分 类 测试 

参考 等 价 划分 测试 (Equivalence Partition Testing) 。 

Path 路 径 

一 个 组 件 从 入 口 到 出 口 的 一 条 可 执行 语句 顺序 。 

Path Coverage 路 径 覆 盖 

在 组 件 中 被 测试 执行 到 的 路 径 的 百分比 。 

Path Sensitizing 一 一 路 径 敏 感性 

选择 一 组 输入 值 强制 组 件 走 一 个 给 定 的 路 径 。 

Path Testing 一 一 路 径 测试 

根据 路 径 设 计 测 试用 例 的 一 种 技术 ,经 常用 于 状态 转换 测试 中 。 
Performance Testing 性 能 测试 

评价 一 个 产品 或 组 件 与 性 能 需求 是 否 符合 的 测试 。 

Portability Testing 一 一 可 移植 性 

测试 瞄准 于 证 明 软 件 可 以 被 移植 到 指定 的 硬件 或 软件 平台 上 。 
Positive Testing 一 一 正 向 测试 

测试 瞄准 于 显示 系统 能 够 正常 工作 。 

Precondition 一 一 预 置 条 件 


环境 或 状态 条 件 ,组件 执行 之 前 必须 被 填充 一 个 特定 的 输入 值 。 
Predicate 一 一 谓词 
一 个 逻辑 表达 式 ,结果 为 真 ’ 或 假 ”。 


Predicate Data Use 一 一 谓词 数据 使 用 

在 谓词 中 的 一 个 数据 使 用 。 

Program Instrumenter—— f£ JY dfi 

参考 插 装 (Instrumenter) 。 

Progressive Testing 一 一 递 进 测试 

在 先前 特性 回归 测试 之 后 对 新 特性 进行 测试 的 一 种 策略 。 

Pseudo-Random 一 一 伪 随 机 

看 似 随 机 的 ,实际 上 是 根据 预先 安排 的 顺序 进行 的 。 

Q. 

QA 一 一 质量 保证 (Quality Assurance) 

CD 已 计划 的 系统 性 活动 ,用 于 保证 一 个 组 件 、 模 块 或 系统 遵从 已 确立 的 需求 。 

(2) 采取 的 所 有 活动 以 保证 一 个 开发 组 织 交 付 的 产品 满足 性 能 需求 和 已 确立 的 标准 和 
过 程 。 

QC 一 一 质量 控制 (Quality Control) 

用 于 获得 质量 需求 的 操作 技术 和 过 程 ,如 测试 活动 。 

| 

Race Condition 一 一 竞争 状态 

并 行 问题 的 根源 。 对 一 个 共享 资源 的 多 个 访问 .至 少 包含 一 个 写 操 作 , 但 是 没有 一 个 机 
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制 来 协调 同时 发 生 的 访问 。 

Recovery Testing 一 一 恢复 性 测试 

验证 系统 从 失效 中 恢复 能 力 的 测试 。 

Regression Analysis and Testing 回归 分 析 和 测试 

一 个 软件 验证 和 确认 任务 以 确定 在 修改 后 需要 重复 测试 和 分 析 的 范围 。 

Regression Testing 回归 测试 

在 发 生 修 改 之 后 重新 测试 先前 的 测试 以 保证 修改 的 正确 性 。 
发 布 

一 个 批准 版 本 的 正式 通知 和 分 发 。 

Reliability 一 一 可 靠 性 

一 个 系统 或 组 件 在 规定 的 条 件 下 在 指定 的 时 间 内 执行 其 需要 功能 的 能 力 。 

Reliability Assessment 一 一 可 靠 性 评价 

确定 一 个 已 有 系统 或 组 件 的 可 靠 性 级 别 的 过 程 。 

Requirements-Based Testing 一 一 基于 需求 的 测试 

根据 软件 组 件 的 需求 导出 测试 用 例 的 一 种 设计 方法 。 

Review 一 一 评审 

在 产品 开发 过 程 中 ,把 产品 提交 给 项 目 成 员 、 用 户 、 管 理 者 或 其 他 相关 人 员 评 价 或 批准 
的 过 程 。 

Risk 一 一 风险 

不 期 望 效果 的 可 能 性 和 严重 性 的 一 个 度量 。 

Risk Assessment 一 一 风险 评估 

对 风险 和 风险 影响 的 一 个 完整 的 评价 。 

S. 

Safety 一 一 (生命 ) 安 全 性 

不 会 引起 人 员 伤 亡 .产生 疾病 .毁坏 或 损失 设备 和 财产 或 者 破坏 环境 。 

Safety Critical 严格 的 安全 性 

一 个 条 件 .事件 .操作 、 过 程 或 项 , 它 的 认识 、 控 制 或 执行 对 生命 安全 性 的 系统 来 说 是 非 
常 关键 的 。 

Sanity Testing 一 一 理智 测试 

软件 主要 功能 成 分 的 简单 测试 以 保证 它 是 否 能 进行 基本 的 测试 。 参 考 冒 烟 测 试 。 

SDP 一 一 软件 开发 计划 (Software Development Plan) 

用 于 一 个 软件 产品 开发 的 项 目 计划 。 

Security Testing 安全 性 测试 

验证 系统 是 否 符合 安全 性 目标 的 一 种 测试 。 


Release 


Security (信息 ) 安 全 性 
参考 计算 机 系统 安全 性 (Computer System Security) 


Serviceability Testing 可 服务 性 测试 
参考 可 维护 性 测试 (Maintainability Testing) 
Simple Subpath 简单 子路 径 
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控制 流 的 一 个 子路 径 , 其 中 没有 不 必要 的 部 分 被 执行 。 
Simulation 一 一 模拟 
使 用 另 一 个 系统 来 表示 一 个 物理 的 或 抽象 的 系统 的 选 定 行为 特性 。 


Simulation 模拟 
使 用 一 个 可 执行 模型 来 表示 一 个 对 象 的 行为 。 
Simulator 模拟 器 


软件 验证 期 间 的 一 个 设备 .软件 程序 或 系统 , 当 它 给 定 一 个 控制 的 输入 时 ,表现 的 与 一 
个 给 定 的 系统 类 似 。 

SLA 一 一 服务 级 别 协议 (Service Level Agreement) 

服务 提供 商 与 客户 之 间 的 一 个 协议 ,用 于 规定 服务 提供 商 应 当 提 供 什么 服务 。 

Smoke Testing 冒 烟 测 试 

对 软件 主要 功能 进行 快餐 式 测试 。 最 早 来 自 于 硬件 测试 实践 ,以 确定 新 的 硬件 在 第 一 
次 使 用 的 时 候 不 会 着 火 。 

Software Development Process: 软件 开发 过 程 

一 个 把 用 户 需求 转换 为 软件 产品 的 开发 过 程 。 

Software Diversity 一 一 软件 多 样 性 

一 种 软件 开发 技术 ,其 中 是 由 不 同 的 程序 员 或 开发 组 开发 的 相同 规格 的 不 同 程序 ,目的 
是 为 了 检测 错误 .增加 可 靠 性 。 

Software Element 一 一 软件 元 素 

软件 开发 或 维护 期 间 产 生 或 获得 的 一 个 可 交付 的 或 过 程 内 的 文档 。 

Software Engineering 一 一 软件 工程 

一 个 应 用 于 软件 开发 .操作 和 维护 的 系统 性 的 有 纪律 的 .可 量化 的 方法 。 

Software Engineering Environment 一 一 软件 工程 环境 

执行 一 个 软件 工程 工作 的 硬件 .软件 和 固件 。 

Software Life Cycle 一 一 软件 生命 周期 

开始 于 一 个 软件 产品 的 构思 ,结束 于 该 产品 不 再 被 使 用 的 这 段 时 间 。 

SOP 标准 操作 过 程 (Standard Operating Procedures) 

书面 的 步骤 ,这 对 保证 生产 和 处 理 的 控制 是 必需 的 。 

Source Code 源 代码 

一 种 适合 输入 到 汇编 器 ,编译 器 或 其 他 转换 设备 的 计算 机 指令 和 数据 定义 。 
源 语句 

参考 语句 (Statement) 。 

Specification 一 一 规格 

组 件 功 能 的 一 个 描述 ,格式 是 : 对 指定 的 输入 在 指定 的 条 件 下 的 输出 。 

Specified Input 指定 的 输入 

一 个 输入 ,根据 规格 能 预知 其 输出 。 

Spiral Model 螺旋 模型 

软件 开发 过 程 的 一 个 模型 ,其 中 的 组 成 活动 ,典型 的 包括 需求 分 析 , 概 要 设计 ,详细 设 
计 , 编 码 ,集成 和 测试 等 活动 被 迭代 地 执行 直到 软件 被 完成 。 


Source Statement 


MRA 软件 测试 常用 术语 表 


SQL 一 一 结构 化 查询 语 名 (Structured Query Language) 

在 一 个 关系 数据 库 中 查询 和 处 理 数 据 的 一 种 语言 。 

State 状态 

一 个 系统 、 组 件 或 模拟 可 能 存在 其 中 的 一 个 条 件 或 模式 。 

State Diagram 状态 图 

一 个 图 形 ,描绘 一 个 系统 或 组 件 可 能 假设 的 状态 ,并 且 显示 引起 或 导致 一 个 状态 切换 到 
另 一 个 状态 的 事件 或 环境 。 

State Transition 一 一 状态 转换 

一 个 系统 或 组 件 的 两 个 允许 状态 之 间 的 切换 。 

State Transition Testing 一 一 状态 转换 测试 

根据 状态 转换 来 设计 测试 用 例 的 一 种 方法 。 

Statement 语句 

程序 语言 的 一 个 实体 ,是 典型 的 最 小 可 执行 单元 。 

Statement Coverage 语句 覆盖 

在 一 个 组 件 中 ,通过 执行 一 定 的 测试 用 例 所 能 达到 的 语句 覆盖 百分比 。 

Statement Testing 一 一 语句 测试 

根据 语句 覆盖 来 设计 测试 用 例 的 一 种 方法 。 

Static Analysis 一 一 静态 分 析 

分 析 一 个 程序 的 执行 ,但 是 并 不 实际 执行 这 个 程序 。 

Static Analyzer 一 一 静态 分 析 器 

进行 静态 分 析 的 工具 。 

Static Testing 一 一 静态 测试 

不 通过 执行 来 测试 一 个 系统 。 

Statistical Testing 一 一 统计 测试 

通过 使 用 对 输入 统计 分 布 进行 分 析 来 构造 测试 用 例 的 一 种 测试 设计 方法 。 

Stepwise Refinement 逐步 优化 

一 个 结构 化 软件 设计 技术 ,数据 和 处 理 步骤 首先 被 广泛 地 定义 ,然后 被 逐步 地 进行 了 
细 化 。 

Storage Testing 一 一 存储 测试 

验证 系统 是 否 满足 指定 存储 目标 的 测试 。 

Stress Testing 一 一 压力 测试 

在 规定 的 规格 条 件 或 者 超过 规定 的 规格 条 件 下 ,测试 一 个 系统 ,以 评价 其 行为 。 类 似 负 
载 测 试 ,通常 是 性 能 测试 的 一 部 分 。 

Structural Coverage 结构 化 覆盖 

根据 组 件 内 部 的 结构 度量 覆盖 率 。 

Structural Test Case Design 结构 化 测试 用 例 设计 

根据 组 件 内 部 结构 的 分 析 来 设计 测试 用 例 的 一 种 方法 。 

Structural Testing 一 一 结构 化 测试 

参考 结构 化 测试 用 例 设计 (Structural Test Case Design) 
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Structured Basis Testing 一 一 结构 化 的 基础 测试 

根据 代码 逻辑 设计 测试 用 例 来 获得 100%% 分 支 覆盖 的 一 种 测试 用 例 设 计 技术 。 

Structured Design 一 一 结构 化 设计 

软件 设计 的 任何 遵循 一 定 纪 律 的 方法 , 它 按照 特定 的 规则 ,例如 : 模块 化 ,由 项 向 下 设 
计 , 数 据 逐 步 优化 ,系统 结构 和 处 理 步骤 。 

Structured Programming 一 一 结构 化 编程 

在 结构 化 程序 开发 中 的 任何 包含 结构 化 设计 和 结果 的 软件 开发 技术 。 

Structured Walkthrough 一 一 结构 化 走读 

参考 走读 (Walkthrough) 。 

Stub—— ft 

一 个 软件 模块 的 框架 或 特殊 目标 实现 ,主要 用 于 开发 和 测试 一 个 组 件 ,该 组 件 调用 或 依 
赖 这 个 模块 。 


Symbolic Evaluation 符号 评价 
参考 符号 执行 (Symbolic Execution) 。 
Symbolic Execution 符号 执行 


通过 符号 表达 式 来 执行 程序 路 径 的 一 种 静态 分 析 设 计 技 术 。 其 中 ,程序 的 执行 被 用 符 
号 来 模拟 ,例如 ,使 用 变量 名 而 不 是 实际 值 ,程序 的 输出 被 表示 成 包含 这 些 符 号 的 迎 辑 或 数 
学 表达 式 。 

Symbolic Trace 一 一 符号 轨迹 

一 个 计算 机 程序 通过 符号 执行 时 经 过 的 语句 分 支 结果 的 一 个 记录 。 

Syntax Testing 一 一 语法 分 析 

根据 输入 语法 来 验证 一 个 系统 或 组 件 的 测试 用 例 设 计 技术 。 

System Analysis 一 一 系统 分 析 

对 一 个 计划 的 或 现实 的 系统 进行 的 一 个 系统 性 调查 以 确定 系统 的 功能 以 及 系统 与 其 他 
系统 之 间 的 交互 。 

System Design 一 一 系统 设计 

一 个 定义 硬件 和 软件 构架 组件 .模块 .接口 和 数据 的 过 程 以 满足 指定 的 规格 。 

System Integration 一 一 系统 集成 

一 个 系统 组 件 的 渐 增 的 连接 和 测试 ,直到 一 个 完整 的 系统 。 

System Testing 一 一 系统 测试 

从 一 个 系统 的 整体 而 不 是 个 体 上 来 测试 一 个 系统 ,并 且 该 测试 关注 的 是 规格 ,而 不 是 系 
统 内 部 的 逻辑 。 

T. 


Technical Requirements Testing 


技术 需求 测试 

参考 非 功 能 需求 测试 (Non-Functional Requirements Testing) 

Test Automation 一 一 测试 自动 化 

使 用 工具 来 控制 测试 的 执行 结果 的 比较 测试 预 置 条 件 的 设置 .其 他 测试 控制 和 报告 
功能 。 

Test Case 


测试 用 例 
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用 于 特定 目标 而 开发 的 一 组 输入 、 预 置 条 件 和 预期 结果 。 
测试 用 例 设计 技 术 


Test Case Design Technique 
选择 和 导出 测试 用 例 的 技术 。 
Test Case Suite 测试 用 例 套 
对 被 测 软件 的 一 个 或 多 个 测试 用 例 的 集合 。 
Test Comparator 测试 比较 器 
一 个 测试 工具 用 于 比较 软件 实际 测试 产生 的 结果 与 测试 用 例 预期 的 结果 。 
Test Completion Criterion 一 一 测试 完成 标准 
一 个 标准 用 于 确定 被 计划 的 测试 何 时 完成 。 
Test Coverage 测试 覆盖 
参考 覆盖 率 (Coverage) 
Test Driver 测试 驱动 
一 个 程序 或 测试 工具 用 于 根据 测试 套 执行 软件 。 
Test Environment 一 一 测试 环境 
测试 运行 其 上 的 软件 和 硬件 环境 的 描述 ,以 及 任何 其 他 与 被 测 软 件 交 互 的 软件 ,包括 驱 
S RUE. 
Test Execution 一 一 测试 执行 
一 个 测试 用 例 被 被 测 软件 执行 ,并 得 到 一 个 结果 。 
Test Execution Technique 一 一 测试 执行 技术 
执行 测试 用 例 的 技术 ,包括 手工 .自动 化 等 。 
Test Generator 一 一 测试 生成 器 
根据 特定 的 测试 用 例 产 生 测试 用 例 的 工具 。 
Test Harness 一 一 测试 用 具 
包含 测试 驱动 和 测试 比较 器 的 测试 工具 。 
Test Log 一 一 测试 日 志 
一 个 关于 测试 执行 所 有 相关 细节 的 时 间 记 录 。 
测试 度量 技术 


Test Measurement Technique 

度量 测试 覆盖 率 的 技术 。 

Test Plan 一 一 测试 计划 

一 个 文档 ,描述 了 要 进行 的 测试 活动 的 范围 方法 .资源 和 进度 。 它 确定 测试 项 .被 测 特 
性 测试 任务 . 谁 执行 任务 ,并且 任 何 风险 都 要 冲突 计划 。 

Test Procedure 测试 规程 

一 个 文档 ,提供 详细 的 测试 用 例 执行 指令 。 

Test Records 测试 记录 

对 每 个 测试 ,明确 地 记录 被 测 组 件 的 标识 、 版 本 ,测试 规格 和 实际 结果 。 

Test Report 测试 报告 

一 个 描述 系统 或 组 件 执行 的 测试 和 结果 的 文档 。 

Test Script 测试 脚本 

一 般 指 的 是 一 个 特定 测试 的 一 系列 指令 ,这 些 指 令 可 以 被 自动 化 测试 工具 执行 。 
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Test Specification 一 一 测试 规格 

一 个 文档 ,用 于 指定 一 个 软件 特性 、 特 性 组 合 或 所 有 特性 的 测试 方法 、 输 入 、 预 期 结果 和 
执行 条 件 。 

Test Strategy 测试 策略 

一 个 简单 的 高 层 文档 ,用 于 描述 测试 的 大 致 方法 、 目 标 和 方向 。 

Test Suite 测试 套 

测试 用 例 和 /或 测试 脚本 的 一 个 集合 ,与 一 个 应 用 的 特定 功能 或 特性 相关 。 

Test Target 测试 目标 

一 组 测试 完成 标准 。 

Testability 一 一 可 测试 性 

一 个 系统 或 组 件 有 利于 测试 标准 建立 和 确定 这 些 标准 是 否 被 满足 的 测试 执行 的 程度 。 

Testing 一 一 测试 

IEEE 给 出 的 定义 是 : 一 个 执行 软件 的 过 程 ,以 验证 其 满足 指定 的 需求 并 检测 错误 。 
@ 一 个 软件 项 的 分 析 过 程 以 检测 已 有 条 件 之 间 的 不 同 , 并 评价 软件 项 的 特性 。 

Thread Testing 一 一 线程 测试 

自 项 向 下 测试 的 一 个 变化 版 本 ,其 中 ,递增 的 组 件 集成 遵循 需求 子 集 的 实现 。 

Time Sharing 一 一 时 间 共 享 

一 种 操作 方式 ,允许 两 个 或 多 个 用 户 在 相同 的 计算 机 系统 上 同时 执行 计算 机 程序 。 其 
实现 可 能 通过 时 间 片 轮转 、 优 先 级 中 断 等 。 

Top-Down Design 一 一 由 顶 向 下 设计 

一 种 设计 策略 ,首先 设计 最 高 层 的 抽象 和 处 理 , 然 后 逐步 向 更 低级 别 进行 设计 。 

Top-Down Testing 一 一 自 顶 向 下 测试 

集成 测试 的 一 种 策略 ,首先 测试 最 顶层 的 组 件 , 其 他 组 件 使 用 桩 ,然后 逐步 加 入 较 低层 
的 组 件 进行 测试 ,直到 所 有 组 件 被 集成 到 系统 中 。 

Traceability 一 一 可 跟踪 性 

开发 过 程 的 两 个 或 多 个 产品 之 间 关 系 可 以 被 建立 起 来 的 程度 ,尤其 是 产品 彼此 之 间 有 
一 个 前 后 处 理 关 系 。 

Traceability Analysis 跟踪 性 分 析 

(1) 跟踪 概念 文档 中 的 软件 需求 到 系统 需求 ; 

(2) 跟踪 软件 设计 描述 到 软件 需求 规格 ,以 及 软件 需求 规格 到 软件 设计 描述 ; 

(3) 跟踪 源 代码 对 应 到 设计 规格 ,以 及 设计 规格 对 应 到 源 代码 。 分 析 确 定 它们 之 间 正 
确 性 一 致 性 、 完 整 性 ,精确 性 的 关系 。 

Traceability Matrix 跟踪 矩阵 

一 个 用 于 记录 两 个 或 多 个 产品 之 间 关 系 的 和 矩阵。 例如 ,需求 跟踪 矩阵 是 跟踪 从 需求 到 
设计 再 到 编码 的 实现 。 

Transaction 一 一 事务 /处 理 

(1) 一 个 命令 消息 或 输入 记录 , 它 明 确 或 隐 含 地 调用 了 一 个 处 理 活 动 , 例 如 更 新 一 个 
交待。 

(2) 用 户 和 系统 之 间 的 一 次 交互 。 
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(3) 在 一 个 数据 库 管 理 系统 中 ,完成 一 个 特定 目的 的 处 理 单元 ,如 恢复 .更 新 .修改 或 删 
除 一 个 或 多 个 数据 元 素 。 

Transform Analysis 事务 分 析 

系统 的 结构 是 根据 分 析 系 统 需要 处 理 的 事务 获得 的 一 种 分 析 技 术 。 

Trojan Horse 特洛伊 木马 

一 种 攻击 计算 机 系统 的 方法 ,典型 的 方法 是 提供 一 个 包含 具有 攻击 性 隐 含 代码 的 有 用 
程序 给 用 户 , 在 用 户 执行 该 程序 的 时 候 , 其 隐 含 的 代码 对 系统 进行 非法 访问 ,并 可 能 产生 
破坏 。 

Truth Table 一 一 真 值 表 

用 于 逮 辑 操作 的 一 个 操作 表格 。 


Ú. 
Unit Testing 单元 测试 
测试 单个 的 软件 组 件 ,属于 白 盒 测试 范畴 ,其 测试 基础 是 软件 内 部 的 迎 辑 。 


Usability Testing 可 用 性 测试 

测试 用 户 使 用 和 学 习 产 品 的 容易 程度 。 

v. 

Validation 一 一 确认 

根据 用 户 需 要 确认 软件 开发 的 产品 的 正确 性 。 

Verification 验证 

评价 一 个 组 件 或 系统 以 确认 给 定 开发 阶段 的 产品 是 否 满足 该 阶段 开始 时 设 定 的 标准 。 

Version 一 一 版 本 

一 个 软件 项 或 软件 元 素 的 一 个 初始 发 布 或 一 个 完整 的 再 发 布 。 

Volume Testing 一 一 容量 测试 

使 用 大 容量 数据 测试 系统 的 一 种 策略 。 

W. 

Walkthrough 一 一 走读 

一 个 针对 需求 .设计 或 代码 的 非 正 式 的 同行 评审 ,一 般 由 作者 发 起 ,由 作者 的 同行 参与 
进行 的 评审 过 程 。 

Waterfall Model 一 一 瀑布 模型 

软件 开发 过 程 模型 的 一 种 ,包括 概念 阶段 .需求 阶段 .设计 阶段 .实现 阶段 .测试 阶段 . 安 
装 和 检查 阶段 .操作 和 维护 阶段 ,这 些 阶 段 按 次 序 进行 ,可 能 有 部 分 重 琶 ,但 很 少 会 迭代 。 

White Box Testing 白 盒 测试 

根据 软件 内 部 的 工作 原理 分 析 来 进行 测试 。 


”软件 测试 常见 问题 


软件 测试 的 目标 是 要 发 现 错误 ,因此 在 编写 测试 用 例 的 时 候 也 要 遵循 这 个 目标 ,尽量 在 
软件 的 最 薄弱 环节 多 编写 测试 用 例 。 虽 然 测试 时 有 很 多 单个 输入 变量 、 多 个 输入 变量 的 组 
合 , 但 优秀 的 软件 测试 人 员 不 会 依靠 运气 ,他 们 有 着 丰富 的 经 验 和 直觉 ,可 以 从 中 找到 哪些 
是 需要 进行 测试 的 ,哪些 是 不 需要 测试 的 ,哪些 操作 可 能 会 引起 软件 失效 。 把 这 些 测试 人 员 
的 经 验 和 直觉 尽量 归纳 和 固化 ,就 形成 了 下 面 介绍 的 21 种 故障 模型 。 故 障 模型 指明 了 故障 
是 如 何以 及 为 什么 会 在 软件 执行 时 引起 软件 失效 。 在 测试 过 程 中 ,可 以 按照 这 些 故 障 模型 
所 提供 的 缺陷 类 型 和 寻找 该 类 缺陷 的 方法 找到 尽量 多 的 缺陷 。 


1. 输入 非法 数据 


1) 缺陷 产生 原因 

开发 人 员 通 常用 以 下 三 种 技术 来 处 理 非法 输入 。 

CD. 防止 不 正确 的 输入 进入 被 测 软 件 。 过 滤 掉 不 正确 的 输入 ,只 允许 合法 输入 通过 
界面 。 

(2) 输入 不 正确 的 数据 后 ,软件 提示 错误 信息 ,拒绝 不 正确 的 输入 。 

(3) 允许 不 正确 的 输入 进入 系统 并 进行 处 理 ,软件 失效 时 调用 异常 处 理 程序 ,显示 一 些 
错误 信息 。 

可 见 开发 人 员 除 了 编写 主要 的 功能 代码 外 ,还 必须 编写 对 非法 输入 的 检查 代码 ,这些 代 

经 常 被 遗忘 ,或 者 编写 完 这 部 分 代码 后 ,开发 人 员 很 少 认真 检查 ,导致 处 理 非法 输入 经 常 
MP 

2) 如 何 发 现 这 类 问题 

进行 测试 时 从 输入 值 的 属性 出 发 ,一般 考虑 以 下 三 点 。 

(1) 输入 类 型 : 输入 无 效 的 类 型 常会 产生 错误 信息 。 

(2) 输入 长 度 : 对 于 字符 型 ,输入 太 多 的 字符 常会 引出 错误 信息 。 

(3) 边界 值 : 输入 边界 值 或 超过 边界 值 的 数据 。 

3) 测试 方法 小 结 

CD 应 用 场合 : GUI 的 输入 。 

(2) 测试 方法 : 分 别 从 输入 数据 的 类 型 长度、 边界 值 等 方面 进行 考虑 。 

(3) 测试 信息 检查 : 

CD 错误 信息 和 错误 要 一 致 。 

O 错误 信息 的 内 容 为 空 ,用户 不 知道 为 什么 出 错 。 
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@ 显示 的 错误 信息 是 给 开发 人 员 调 试 使 用 的 ,例如 “Error 5-unknown data”, 开 发 人 员 
可 以 通过 该 信息 很 容易 找到 错误 类 型 ,但 是 用 户 根本 不 明白 ,不 知道 做 错 了 什么 。 
(4) 测试 知识 储备 : 牢记 各 基本 数据 类 型 的 边界 值 。 


2. 输入 默认 值 


1) 缺陷 产生 原因 

一 旦 软件 中 使 用 了 变量 ,就 必须 赋 给 初始 值 , 如 果 在 赋值 之 前 就 使 用 了 这 些 变量 ,软件 
就 会 失效 ,正确 地 使 用 变量 的 顺序 是 : 声明 变量 一 给 变量 赋值 一 使 用 变量 。 通 常会 由 于 以 
下 两 个 原因 使 变量 的 默认 值 不 正确 。 

(1) 给 变量 赋值 这 一 步 经 常会 被 开发 人 员 不 经 意 地 略 过 。 

(2) 开发 人 员 有 时 不 确定 到 底 要 赋 什 么 初始 值 , 就 随便 给 了 一 个 值 ,但 用 户 并 不 认可 该 
值 , 这 种 情况 下 ,软件 并 不 一 定 会 失效 ,但 对 用 户 的 使 用 会 带 来 很 多 不 便 。 例 如 , 某 程序 把 打 
印 默认 输出 份 数 设置 为 两 份 ,会 给 用 户 造成 很 大 麻烦 。 

2) 如 何 发 现 这 类 问题 

确定 应 用 软件 中 所 使 用 的 数据 有 以 下 一 些 基 本 原则 。 

CD 查找 选项 按钮 .配置 面板 .安装 屏幕 等 。 这 种 屏幕 上 显示 的 数据 常常 在 应 用 程序 的 
许多 地 方 用 到 。 

(2) 查阅 源 代码 的 数据 声明 部 分 (如 果 可 以 得 到 ) 。 

(3) 确定 了 要 测试 的 数据 ,可 以 通过 以 下 操作 来 强制 使 用 或 不 使 用 默认 的 值 。 

CD 接受 软件 显示 的 默认 值 。 有 时 软件 需要 用 户 输入 一 个 值 ,如 果 没 有 输入 任何 值 , 软 
件 就 可 能 失效 。 这 时 可 以 只 是 简单 地 单 击 “确定 ”按钮 来 接受 默认 值 , 完 成 这 个 功能 测试 。 

®© 输入 空 值 。 删 除 默认 值 ,使 输入 域 变 成 空 值 。 

© 将 默认 值 改 为 男 一 个 值 ,这 样 会 使 应 用 程序 以 不 同 的 值 来 运行 。 

@ 将 输入 值 改 为 男 一 个 值 ,然后 再 变 以 空 值 。 

一 个 好 的 软件 会 这 样 处 理 以 上 情况 ,将 输入 的 不 合法 内 容 默 认为 合法 边界 内 的 某 个 合 
理 值 ,或 者 返回 错误 提示 信息 。 

3) 测试 方法 小 结 

(1) 应 用 场合 : 需要 有 默认 值 的 地 方 。 

(2) 测试 方法 : 分 别 从 选项 按钮 .配置 面板 .安装 配置 .开始 界面 等 方面 进行 考虑 ,强制 
使 用 或 不 使 用 默认 值 等 。 

(3) 测试 知识 储备 : 全 面 理解 需求 规格 说 明 书 中 对 默认 值 的 要 求 ; 同时 深刻 理解 被 测 
软件 的 行业 背景 。 


3. 输入 特殊 字符 集 


1) 缺陷 产生 原因 

应 用 程序 接受 字符 串 输 入 ,如 果 程 序 没有 针对 特殊 输入 进行 特殊 编程 ,那么 就 有 可 能 导 
致 程序 挂 起 ,主要 包括 以 下 三 种 情况 。 

COD 字符 集 包括 普通 字符 和 特殊 字符 。 例 如 ,ASCII 字符 集 包括 普通 字符 和 特殊 字符 。 
应 用 程序 有 时 只 能 处 理 普通 字符 , 当 输 入 特殊 字符 时 就 会 出 现 错误 。 
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(2) 实现 应 用 程序 的 程序 设计 语言 有 特定 的 处 理 一 些 字符 和 字符 串 的 方法 。 例 如 ,C 
语言 把 \n\ 十 十 和 B. 这 样 的 字符 用 于 特殊 目的 。 如 果 将 这 些 字符 串 输入 到 对 话 框 中 ,程序 
必须 进行 错误 处 理 , 否 则 容易 产生 错误 。 

CD. 应 用 程序 有 时 也 使 用 设置 名 称 、 系 统 对 象 和 程序 的 保留 字符 串 集合 。 只 要 在 程序 
中 使 用 了 这 些 字符 串 ,就 可 能 导致 失效 。 

2) 如 何 发 现 这 类 问题 

(1) 根据 被 测 软件 所 处 的 操作 系统 、 使 用 的 程序 设计 语言 .字符 集 等 信息 列 出 表格 , 通 
过 测试 小 组 的 讨论 ,标明 应 用 表格 中 的 哪些 字符 和 数据 类 型 作为 输入 来 测试 。 

(2) 根据 经 验 ,软件 很 少 会 因为 这 种 操作 而 崩溃 ,通常 它 会 挂 起 没有 响应 。 

3) 测试 方法 小 结 

CD 应 用 场合 : 需要 接收 字符 输入 的 地 方 。 

(2) 测试 方法 : 根据 被 测 软件 的 具体 情况 输入 非法 字符 。 

(3) 测试 知识 储备 : 尽 可 能 多 地 了 解 字符 集 、 程 序 设计 语言 和 操作 系统 中 的 保留 字符 
串 及 其 特定 含义 ,可 以 更 好 地 分 辨 这 类 缺陷 。 


4. 输入 使 缓冲 区 溢出 的 数据 


1) 缺陷 产生 原因 

开发 人 员 没 有 考虑 传送 给 内 存 缓冲 区 的 字符 串 的 大 小 。 如 果 缓 冲 区 只 能 保留 固定 长 度 
的 字符 串 ,输入 更 长 的 字符 串 就 会 改写 其 他 的 内 存 存 储 单元 ,引起 操作 系统 强制 性 地 终止 应 
用 程序 。 

2) 如 何 发 现 这 类 问题 

当 应 用 程序 允许 输入 字母 ,数字 时 ,通过 GUI 控件 (如 文本 框 ) ,或 者 通过 API 调用 的 
参数 来 进行 这 种 测试 。 

(1) 弄 清楚 要 测试 的 输入 域 的 长 度 , 输 入 最 大 字符 串 测试 。 

(2) 输入 一 个 比 最 大 字符 串 长 的 字符 串 ,应 用 程序 可 能 出 现 错误 提示 信息 ,提示 不 允许 
输入 ; 或 者 输入 了 更 长 的 字符 串 使 应 用 程序 崩溃 。 

3) 测试 方法 小 结 

(1) 应 用 场合 : 需要 接收 字符 输入 的 地 方 。 

(2) 测试 方法 : 根据 被 测 软件 的 具体 情况 输入 最 大 字符 串 或 输入 一 个 比 最 大 字符 串 更 
长 的 字符 串 。 

(3) 测试 知识 储备 : 尽 可 能 多 地 和 开发 人 员 讨 论 , 以 了 解 和 确定 输入 域 的 合理 长 度 。 


5. 输入 产生 错误 的 合法 数据 组 合 


D 缺陷 产生 原因 

测试 多 个 输入 值 的 组 合 ,每 个 输入 值 已 被 单独 测试 过 ,但 是 这 些 值 的 组 合 可 能 会 互相 影 
响 而 引起 软件 失效 。 

2) 如 何 发 现 这 类 问题 

首先 要 确定 测试 哪些 输入 组 合 ,并 弄 清楚 它们 之 间 的 “关系 ”。 如 果 具 备 以 下 任 一 特性 ， 
就 可 以 认为 这 些 变 量 是 有 “关系 ”的 。 
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(1) 描述 的 是 有 关 单 个 内 部 数据 结构 的 属性 和 内 容 。 例 如 ,输入 面板 需要 用 户 输入 列 
表 的 “ 行 " 和 “ 列 ”, 这 时 测试 人 员 要 输入 单个 内 部 数据 结构 “列表 ”的 属性 “ 行 "? 和 “ 列 ”。 

(2) 一 起 用 在 了 一 个 计算 中 ,也 就 是 将 多 个 输入 用 作 一 个 内 部 计算 的 操作 数 ,因此 这 些 
输入 变量 具有 了 相互 “关系 ”。 

3) 测试 方法 小 结 

(1) 应 用 场合 : 输入 值 之 间 存 在 依赖 关系 。 

(2) 测试 方法 : 输入 可 能 存在 问题 的 组 合 值 。 

(3) 测试 知识 储备 : 尽 可 能 多 地 了 解 内 部 数据 结构 的 属性 和 内 容 , 并 与 开发 人 员 探 讨 ， 
以 确定 输入 的 数据 值 。 


6. 产生 同一 个 输入 的 各 种 可 能 输出 


1) 缺陷 产生 原因 

单个 输入 产生 多 种 输出 的 情况 与 先前 的 输入 和 被 测 系统 的 状态 都 有 关系 。 例 如 ,在 文 
字 处 理 程序 中 单 击 * 关 闭 ? 按 钮 ,如 果 文 件 被 编辑 且 未 被 保存 ,程序 将 提示 是 否 保存 文件 。 如 
果 文 件 已 被 保存 过 , 则 文件 直接 关闭 。 

2) 如 何 发 现 这 类 问题 

测试 人 员 必 须 具 有 关于 被 测 系 统 软件 的 业务 方面 的 知识 ,具备 各 种 程序 文档 ,明确 一 个 
输入 可 以 产生 何 种 输出 。 可 以 据 此 列 出 关于 程序 输入 与 输出 的 一 个 列表 ,然后 进行 测试 。 

3) 测试 方法 小 结 

(1) 应 用 场合 : 同一 输入 对 应 多 个 输出 的 情况 。 

(2) 测试 方法 : 测试 输入 对 应 的 每 一 个 输出 。 

(3) 测试 知识 储备 : 全 面 理解 需求 规格 说 明 书 中 的 内 容 , 找 出 输入 与 输出 之 间 的 关系 。 


7. 输出 不 符合 业务 规则 的 无 效 输 出 


1) 缺陷 产生 原因 

有 时 开发 人 员 也 可 能 对 业务 了 解 不 深刻 ,对 有 些 问 题 也 是 一 知 半 解 ,因此 编写 出 的 软件 
就 会 产生 不 符合 业务 逻辑 的 问题 。 另 外 ,在 绝 大 多 数 情 况 下 开发 人 员 会 忽略 处 理 没有 遵循 
一 般 规则 的 输入 ,如 果 不 对 这 些 特殊 情况 进行 编程 处 理 , 软 件 就 会 产生 错误 的 结果 。 

2) 如 何 发 现 这 类 问题 

(1) 测试 人 员 应 该 尽 可 能 地 学 习 涉及 问题 的 领域 。 

(2) 有 时 在 列举 出 无 效 输出 后 ,也 很 难 知道 哪些 输入 组 合 能 强制 这 些 输出 产生 。 这 时 
测试 人 员 必 须 先 要 确定 哪些 输入 与 输出 有 关 , 然 后 用 产生 意外 结果 的 输入 组 合 进行 测试 , 测 
试 过 程 中 要 注意 输入 执行 顺序 ,用 不 同 的 顺序 执行 可 能 得 到 不 同 的 结果 。 如 果 不 能 强制 无 
效 的 输出 产生 ,就 说 明 软 件 没有 这 方面 的 缺陷 。 

3) 测试 方法 小 结 

(1) 应 用 场合 : 强制 产生 不 符合 业务 背景 的 知识 。 

(2) 测试 方法 : 列举 出 所 有 的 无 效 输出 ,然后 逐一 测试 。 

(3) 测试 知识 储备 : 全 面 理解 需求 规格 说 明 书 中 的 内 容 , 熟 悉 行 业 背 景 知 识 。 
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8. 输出 属性 修改 后 的 结果 


1) 缺陷 产生 原因 

输出 常常 具有 可 修改 的 属性 ,如 颜色 ,形状 、 维 数 及 大 小 等 ,用 户 可 以 修改 这 些 属性 。 在 
这 种 情况 下 ,开发 人 员 必须 编码 .设立 初始 或 默认 属性 值 ,然后 编码 允许 用 户 编辑 这 些 属性 。 
当 用 户 改变 了 这 些 属 性 后 ,内 部 的 相应 变量 值 也 随 着 变化 ,再 次 进行 处 理 时 ,这 些 值 没有 被 
重新 恢复 为 默认 值 ,输出 的 属性 就 被 强制 改变 了 。 

2) 如 何 发 现 这 类 问题 

该 测试 方法 可 以 使 用 在 那些 输出 具有 可 编辑 性 、 可 修改 性 的 功能 中 。 测 试 人 员 首 先 要 
仔细 了 解 能 够 产生 的 输出 ,特别 要 注意 具有 可 编辑 属性 的 输出 。 测 试 人 员 的 任务 就 是 强制 
每 个 输出 产生 ,并 编辑 其 属性 ,然后 再 次 强制 输出 产生 。 

3) 测试 方法 小 结 

CD 应 用 场合 : 输出 的 结果 ,可 以 由 用 户 修改 属性 得 出 。 

(2) 测试 方法 : 强制 每 个 输出 产生 ,并 编辑 其 属性 ,然后 再 次 强制 产生 输出 。 

(3) 测试 知识 储备 : 全 面 理解 需求 规格 说 明 书 中 的 内 容 , 了 解 能 够 产生 的 输出 。 


9. 屏幕 刷新 显示 


1) 缺陷 产生 原因 

通常 GUI 软件 会 产生 刷新 问题 ,因为 GUI 在 对 窗口 进行 覆盖 、 移 动 和 调整 大 小 时 , 必 
须 刷新 屏幕 才能 使 对 象 重新 显示 。 但 是 如 果 经 常 刷新 ,容易 减 慢 应 用 程序 的 运行 速度 ; 如 
果 不 刷新 ,又 会 影响 用 户 对 程序 的 使 用 ,使 用 户 必须 停止 工作 ,去 寻找 刷新 的 方法 才 可 以 继 
续 工 作 。 所 以 开发 人 员 有 时 候 不 能 很 好 地 确定 什么 时 候 需 要 刷新 ,需要 刷新 多 大 范围 的 区 
域 ,这 就 发 生 了 令 人 烦恼 的 刷新 问题 。 

2) 如 何 发 现 这 类 问题 

测试 刷新 间 题 的 方法 是 增加 、 删 除 移动 屏幕 上 的 对 象 ,这 样 会 使 某 些 对 象 重新 显示 。 如 
果 不 能 正确 .及 时 地 进行 重新 显示 ,就 产生 了 软件 缺陷 。 可 以 通过 以 下 几 个 方法 来 检查 
刷新 。 

CD 从 起 始 位 置 移动 对 象 。 先 移动 一 点 儿 , 然 后 增加 移动 幅度 ; 先 移 动 一 次 或 两 次 , 然 
后 多 次 移动 ,确保 履 盖 了 所 有 区 域 。 

(2) 从 覆盖 对 象 的 边界 开始 一 点 点 儿 材 盖 ,使 其 中 一 个 对 象 遮 住 另 一 个 对 象 。 

(3) 使 用 不 同类 型 的 对 象 。 如 果 应 用 程序 支持 多 种 类 型 的 对 象 ,如 文本 对 象 .图 形 对 象 
等 ,就 把 这 些 不 同 对 象 混在 一 起 使 用 。 

3) 测试 方法 小 结 

CD 应 用 场合 : 一 个 对 象 包含 在 另 一 个 对 象 中 , 拖 动 被 包含 对 象 时 ,可 能 出 现 刷新 
问题 。 

(2) 测试 方法 : 增加 、 删 除 和 移动 屏幕 上 的 对 象 。 

(3) 测试 知识 储备 : 全 面 理解 需求 规格 说 明 书 中 的 内 容 , 了 解 程序 中 对 象 之 间 的 
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10. 数据 结构 溢出 


1) 缺陷 产生 原因 

所 有 数据 结构 的 大 小 都 有 上 限 。 一 些 数据 结构 会 逐步 增加 长 度 以 充满 机 器 内 存 容 量 台 
磁盘 空间 ,而 其 他 数据 结构 具有 固定 的 上 限 。 开 发 人 员 经常 对 有 关 数 据 结构 的 内 容 进 行 编 
码 ,忘记 结构 本 身 的 物理 局 限 。 

2) 如 何 发 现 这 类 问题 

(1) 确定 数据 结构 的 界限 ,尝试 将 过 多 的 值 输入 数据 结构 。 应 该 特别 注意 界限 为 数据 
类 型 的 边界 256.1024.32 768 等 上 溢 的 测试 。 

(2) 对 于 下 溢 的 测试 ,可 以 尝试 多 删除 一 个 数据 ,例如 当 结 构 为 空 时 ,尝试 再 删除 ,或 者 
添加 一 个 数据 ,尝试 删除 两 个 数据 时 的 情况 。 

3) 测试 方法 小 结 

(1) 应 用 场合 : 程序 中 存在 数组 。 

(2) 测试 方法 : 尝试 将 过 多 的 值 输入 数据 结构 ,测试 上 溢 ; 对 于 下 洪 的 测试 ,可 以 尝试 
多 删除 一 个 数据 。 

(3) 测试 知识 准备 : 全 面 理解 需求 规格 说 明 书 中 的 内 容 , 确 定数 据 结构 的 界限 。 


11. 数据 结构 不 符合 约束 


1) 缺陷 产生 原因 
在 编程 过 程 中 对 内 部 数据 结构 都 有 所 约束 ,包括 大 小 、 维 数 、 类 型 .形状 .屏幕 上 的 位 置 
。 测 试 的 重点 就 是 用 户 能 够 设置 的 属性 ,这 些 属性 使 用 了 一 组 参数 来 约束 。 在 建立 数据 
项 和 随后 对 数据 项 进行 修改 的 任何 时 刻 都 要 对 数据 属性 的 约束 进行 检查 。 初始 化 代码 中 修 
改 后 的 代码 有 错误 ,在 修改 错误 的 时 候 只 修改 了 初始 化 部 分 ,而 忽略 了 对 其 他 部 分 的 修改 ， 
使 得 其 修改 不 完全 ,不 彻底 。 
2) 如 何 发 现 这 类 问题 
(1) 确认 候选 数据 ,并 列 出 其 可 修改 的 属性 。 对 每 个 属性 列 出 有 效 值 的 允许 范围 .约束 
的 条 件 等 。 
(2) 确定 所 有 可 修改 属性 的 功能 位 置 。 
(3) 对 数据 进行 初始 化 ,改变 每 个 属性 以 确定 是 否 正确 进行 了 约束 。 
如 果 数 据 约束 遭 到 破坏 ,可 能 导致 系统 崩溃 ,或 者 表现 为 响应 时 间 延 迟 ,错误 信息 不 正 
确 以 及 使 用 错误 数据 产生 的 无 效 输出 。 
3) 测试 方法 小 结 
(1) 应 用 场合 : 应 用 程序 内 部 的 数据 结构 存在 约束 。 
(2) 测试 方法 : 破坏 内 部 数据 结构 的 约束 。 
(3) 测试 知识 储备 : 全 面 理解 需求 规格 说 明 书 中 的 内 容 , 确 定 内 部 数据 结构 的 所 有 约束 。 


12. 操作 数 与 操作 符 不 符 


1) 缺陷 产生 原因 
几乎 每 个 运算 符 都 有 它 无 效 的 操作 数 , 对 于 具体 的 操作 符 , 开 发 人 员 在 使 用 它们 时 , 必 


3 


实用 软件 测试 


须 编 写 错误 检查 代码 Dun. 除 以 零 的 问题 。 

2) 如 何 发 现 这 类 问题 

找到 程序 中 包含 的 数据 或 输入 ( 即 操作 数 ) 的 计算 ( 即 操作 符 ) 、 数 学 表达 式 ( 即 操作 符 和 
操作 数 的 组 合 ) 及 对 图 形 的 操作 。 另 外 ,对 多 个 操作 数 进行 组 合 也 更 容易 发 生 错 误 。 例如， 
字符 和 数字 都 可 以 使 用 * 十 ”操作 符 。 对 字符 通过 * 十 ?把 它们 连 成 一 串 ; 对 数字 通过 “十 ”来 
进行 加 法 运算 。 如 果 系 统 尝试 把 字符 和 数字 相 加 , 即 进 行 相互 矛盾 的 操作 ,就 会 引起 软件 
失效 。 

3) 测试 方法 小 结 

(1) 应 用 场合 : 需要 进行 数值 计算 的 程序 或 图 形 操作 的 程序 。 

(2) 测试 方法 : 对 于 数值 计算 考虑 操作 数 和 操作 符 之 间 的 限定 关系 ,对 于 图 形 计算 还 
要 考虑 各 种 输入 数据 之 间 的 组 合 关系 。 

(3) 测试 知识 储备 : 全 面 掌握 被 测 软件 中 操作 符 对 操作 数 的 要 求 。 掌 握 不 同 的 操作 符 
和 操作 数 具 有 的 不 同 的 有 效 和 无 效 的 取 值 范围 。 


13. 递归 调用 自身 


1) 缺陷 产生 原因 

函数 有 时 会 递归 调用 自身 ,如 果 不 限制 执行 次 数 ,递归 就 会 出 现 问题 , 它 不 断 地 调用 自 
身 , 很 快 地 占用 机 器 资源 ,最 终 产 生 溢出 ,使 程序 崩溃 或 挂 起 。 产 生 这 类 问题 的 主要 原因 是 开 
发 人 员 没有 编码 来 保证 循环 和 递归 调用 的 终止 ,通常 是 在 循环 的 开始 或 结束 时 缺少 检查 条 件 。 

2) 如 何 发 现 问题 

在 软件 中 寻找 可 以 使 用 递归 调用 的 功能 。 这 时 可 以 制作 一 个 列表 ,标明 软件 中 可 能 内 
入 递归 的 功能 的 列表 ,然后 自己 引用 自己 来 检查 程序 是 否 能 正确 处 理 。 

3) 测试 方法 小 结 

(1) 应 用 场合 : 需要 和 其 他 对 象 进行 交互 的 地 方 。 

(2) 测试 方法 : 考虑 对 象 的 自我 交互 或 复制 。 

(3) 测试 知识 储备 : 全 面 掌握 被 测 软件 的 需求 。 


14. 计算 结果 溢出 


1) 缺陷 产生 原因 

当 所 有 的 输入 和 数据 都 有 效 时 .计算 的 最 终结 果 也 可 以 是 无 效 的 。 所 有 变量 都 有 值 域 
范围 ,有 时 开发 人 员 在 执行 计算 时 会 忘记 检查 这 些 上 限 。 

2) 如 何 发 现 这 类 问题 

一 次 又 一 次 地 执行 计算 或 使 用 很 大 或 很 小 的 输入 和 数据 进行 计算 ,重点 测试 数据 类 型 
的 初始 值 或 边界 值 附近 的 值 。 

3) 测试 方法 小 结 

CD 应 用 场合 : 应 用 程序 执行 能 够 导出 待产 生 结 果 并 进行 内 部 存储 的 计算 。 

(2) 测试 方法 : 强制 数据 产生 上 溢 或 下 溢 。 

G) 测试 知识 储备 : 全 面 掌握 被 测 软件 的 需求 ,了 解 计算 变量 的 上 下 限 。 
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15. 数据 共享 或 关联 功能 计算 错误 


1) 缺陷 产生 原因 

通常 对 孤立 的 功能 进行 测试 时 不 会 发 生 很 多 缺陷 ,而 当 把 单独 的 功能 和 同一 软件 中 的 
其 他 功能 结合 时 ,就 可 能 出 现 很 多 软件 缺陷 。 这 种 缺陷 的 产生 往往 是 在 两 个 或 更 多 的 功能 
使 用 了 共享 数据 集 ,而 每 个 功能 允许 使 用 的 数据 范围 不 同 引起 的 。 例 如 ,一 个 功能 可 能 会 将 
某 数据 项 设置 为 特定 大 小 ,然而 另 一 个 功能 却 允 许 该 数据 项 的 大 小 可 以 超过 第 一 个 功能 的 
处 理 能 力 。 开 发 人 员 根 本 没 考虑 到 该 数据 项 在 其 他 功能 处 也 可 以 修改 ,他 们 只 是 编码 保证 
在 该 功能 中 数据 的 合法 性 ,而 当 使 用 该 数据 时 ,没有 再 编码 来 检查 可 以 使 用 的 范围 ; 而 此 
时 , 另 一 个 功能 修改 了 共享 数据 , 当 再 使 用 这 些 数据 时 就 产生 了 缺陷 。 

2) 如 何 发 现 这 类 问题 

当 应 用 程序 在 同一 时 间 完 成 一 个 以 上 的 功能 或 当 一 个 以 上 的 功能 在 同一 时 间 处 于 运行 
状态 时 ,就 可 以 使 用 该 方法 进行 测试 。 利 用 一 个 功能 影响 输入 、 输 入 数据 或 另 一 个 功能 的 计 
算 。 在 测试 前 要 确定 哪些 功能 是 相互 依赖 或 共享 数据 的 。 

CD 能 应 用 同样 输入 的 每 个 功能 。 如 果 这 些 功能 有 相互 重要 的 输入 域 , 就 可 能 存在 交 
互 问题 。 

(2) 有 类 似 的 输出 产生 功能 。 如 果 某 些 功能 结合 起 来 产生 单个 输出 ,就 说 明 这 些 部 件 
之 间 存 在 关系 ,应 该 被 一 起 测试 。 

(3) 一 个 功能 被 包含 在 另 一 个 功能 的 计算 中 。 例 如 ,要 测试 鼠标 选取 对 象 的 功能 ,不 仅 
要 测度 鼠标 选取 屏幕 上 的 文本 的 功能 ,还 可 以 把 包含 超 链接 文本 、 粗 体 、 斜 体 、 符 号 及 图 形 的 
元 素 放 在 一 起 ,测试 鼠标 选取 这 些 元 素 的 功能 。 

3) 测试 方法 小 结 

CD 应 用 场合 : 一 个 以 上 的 功能 在 同一 时 间 处 于 运行 状态 。 

(2) 测试 方法 : 以 点 代 面 ,重点 测试 某 一 功能 ,对 可 能 与 这 个 功能 相连 的 其 他 功能 附带 
测试 。 

(3) 测试 知识 储备 : 全 面 掌握 被 测 软 件 的 需求 ,在 测试 之 前 对 被 测 功 能 之 间 的 依赖 关 
联 有 所 掌握 。 男 外 ,还 需要 对 共享 数据 有 所 掌握 。 


16. 文件 系统 超载 


1) 缺陷 产生 原因 

开发 人 员 可 能 会 忘记 编写 代码 处 理 满 状态 的 文件 系统 ,忽略 了 诸如 CreateFile， 
WriteFile 等 操作 系统 API 的 错误 检查 代码 ,没有 这 样 的 代码 , 当 显示 满 状 态 的 文件 系统 时 ， 
API 调用 就 会 失败 ,软件 就 会 在 没有 任何 警告 的 情况 下 崩溃 。 

2) 如 何 发 现 这 类 问题 

创建 满 容量 或 近乎 满 容量 的 文件 系统 ,然后 强制 执行 各 种 通过 输入 或 输出 访问 文件 系 
统 的 操作 ; 或 者 打开 足够 多 的 文件 ,打开 文件 时 会 强制 备份 创建 的 副本 ,从 而 占用 双 倍 的 存 
储 空间 ,这 种 操作 达到 一 定 程度 时 ,会 达到 该 系统 的 容量 ,于 是 就 能 测试 应 用 程序 处 理 超 载 
状态 的 文件 系统 的 能 力 。( 通 常 通过 磁盘 配额 实现 。) 
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3) 测试 方法 小 结 

CD 应 用 场合 : 系统 较 大 ,运行 时 需要 较 大 的 空间 。 

(2) 测试 方法 : 强制 磁盘 系统 满 容量 或 容量 小 于 等 于 被 测 软件 运行 时 所 需 容量 后 , 运 
行 被 测 软件 或 利用 测试 工具 模拟 磁盘 状况 。 

(3) 测试 知识 储备 : 全 面 掌 握 被 测 软件 的 需求 ,了 解 被 测 软件 处 理 超载 状态 的 文件 系 
统 的 能 力 。 


17. 介质 忙 或 不 可 用 


1) 缺陷 产生 原因 

当 多 个 应 用 程序 同时 访问 硬盘 (或 其 他 存储 器 ) 时 ,操作 系统 为 提供 多 请 求 服务 会 慢 下 
来 ,并 且 必 须 对 应 用 程序 进行 编程 以 处 理 这 些 延 迟 , 当 延迟 变 得 很 长 时 ,没有 对 这 些 错误 进 
行 响应 的 应 用 程序 就 会 出 现 错误 。 

2) 如 何 发 现 这 类 问题 

通过 启动 大 量 应 用 程序 ,强制 它们 都 打开 并 保存 文件 使 文件 系统 处 理 繁忙 状态 ; 或 者 
同时 下 载 大 量 文件 也 可 以 使 后 台 拥 挤 ; 检查 被 测 软件 能 否 正确 处 理 这 种 情况 ,应 用 程序 应 
该 给 出 错误 信息 或 等 待 批示 ,提示 用 户 正 在 处 理 。 

3) 测试 方法 小 结 

CD 应 用 场合 : 应 用 程序 的 运行 需要 消耗 大 量 内 存 或 运行 时 需要 其 他 相关 软件 同时 
运行 。 

(2) 测试 方法 : 启动 大 量程 序 或 利用 测试 工具 模拟 磁盘 状况 。 

(3) 测试 知识 储备 : 全 面 掌握 被 测 软件 的 需求 ,了 解 被 测 软件 运行 时 对 系统 的 要 求 。 


18. 介质 损坏 


1) 缺陷 产生 原因 

(1) 损坏 的 介质 可 能 会 使 操作 系统 传 回 错误 代码 ,这 些 错误 代码 没有 在 应 用 程序 中 编 
程 处 理 。 

(2) 操作 系统 不 能 检测 出 所 有 这 样 的 错误 ,操作 系统 自己 也 有 错误 或 者 损坏 的 介质 损 
坏 了 部 分 操作 系统 。 

2) 如 何 发 现 这 类 问题 

使 用 损坏 了 的 介质 ,例如 刊 伤 .灰尘 、 磁 干扰 等 。 检 查 应 用 程序 对 错误 的 处 理 能 力 , 应 用 
程序 可 以 对 错误 进行 处 理 或 者 将 问题 告诉 用 户 ,并 要 确保 用 户 数据 文件 不 丢失 、 未 损坏 。 

3) 测试 方法 小 结 

CD 应 用 场合 : 应 用 程序 对 安全 的 要 求 较 高 ,对 灾难 恢复 的 要 求 较 高 。 

(2) 测试 方法 : 用 实际 损坏 介质 的 方法 测试 应 用 程序 。 

(3) 测试 知识 储备 : 全 面 掌握 被 测 软件 的 需求 ,了 解 被 测 软件 运行 时 对 系统 的 要 求 。 


19. 文件 名 不 合法 


1) 缺陷 产生 原因 
操作 系统 本 身 具 有 自己 的 文件 命名 规范 ,例如 ,DoS 的 8.3 格式 。 在 Windows 中 ,文件 
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名 不 能 超过 255 个 字符 ,并 且 文 件 名 不 可 以 含有 /\ : < > ? x | 这 8 个 字符 ,以 及 AUX, 
COM1,COM2,COM3,COM4,CON,LPT1,LPT2,LPT3,LPT4, NUL 及 PRN 这 些 操作 系 
统 保留 字 。 

开发 人 员 在 应 用 程序 中 使 用 不 相同 的 规则 管理 文件 名 , 当 应 用 程序 和 操作 系统 使 用 的 
文件 名 命名 规则 不 一 致 的 时 候 , 就 会 发 生 问题 。 

2) 如 何 发 现 这 类 问题 

CD 保存 文件 为 操作 系统 不 允许 的 文件 名 ,例如 ,文件 名 中 含有 / 八 :过 二? x | 这 8 个 
字符 ,测试 应 用 程序 是 否 不 允许 输入 包含 这 些 字符 的 文件 名 。 

(2) 输入 一 些 应 用 程序 不 允许 使 用 的 文件 名 ,例如 ,使 用 过 长 的 ,含有 特殊 字符 的 、 可 能 
相互 作用 的 字符 作为 文件 名 ,检查 应 用 程序 能 否 识别 该 文件 。 

3) 测试 方法 小 结 

CD 应 用 场合 : 几乎 所 有 涉及 需要 输入 文件 名 功能 的 应 用 程序 。 

(2) 测试 方法 : 输入 操作 系统 不 允许 的 文件 名 和 应 用 程序 不 允许 使 用 的 文件 名 。 

(3) 测试 知识 储备 : 全 面 掌握 被 测 软件 的 需求 ,了 解 操作 系统 和 应 用 程序 对 文件 名 的 
要 求 。 


20. 更 改 文 件 访问 权限 


1) 缺陷 产生 原因 

在 操作 系统 中 ,可 以 设置 不 同 用 户 对 不 同 的 文件 具有 不 同 的 访问 权限 (如 读 写 、 只 读 
等 )。 程 序 员 必 须 在 访问 文件 的 函数 中 考虑 文件 的 访问 权限 ,例如 ,在 每 个 文件 写 入 之 前 检 
查 文件 的 访问 权限 。 如 果 没 有 进行 检查 ,就 会 导致 程序 出 错 。 另 外 ,如 果 文 件 访问 失败 , 程 
序 员 必 须要 有 正确 的 错误 代码 ,以 保证 程序 可 以 正确 捕获 所 产生 的 错误 。 

2) 如 何 发 现 这 类 问题 

CD 打开 两 个 应 用 程序 ,关闭 同一 个 文件 。 例 如 ,把 同一 个 应 用 程序 的 不 同 版 本 安装 在 
同一 机 器 上 ,在 不 同 版 本 的 应 用 程序 中 打开 和 关闭 同一 文件 ,或 试 着 在 某 个 应 用 程序 中 打开 
在 另 一 个 程序 中 已 打开 的 文件 ,这 可 能 导致 文件 访问 权限 的 冲突 。 

(2) 打开 一 个 文件 ,在 操作 系统 中 修改 文件 的 访问 权限 。 有 些 操作 系统 允许 权限 高 的 
用 户 控制 一 般 用 户 已 经 打开 的 文件 。 

3) 测试 方法 小 结 

COD 应 用 场合 : 需要 对 文件 进行 读 写 操作 的 应 用 程序 。 

(2) 测试 方法 : 修改 文件 访问 权限 或 使 用 低 权 限 的 用 户 访问 文件 。 

(3) 测试 知识 储备 : 全 面 掌握 被 测 软 件 的 需求 ,了 解读 写 文件 所 需 的 权限 。 


21. 文件 内 容 受 损 


1) 缺陷 产生 原因 

开发 人 员 编 写 代码 来 读 取 和 写 入 文件 ,他 们 也 编写 代码 来 调用 系统 API 得 到 文件 指 
针 , 并 打开 和 关闭 文件 。 由 于 某 些 原因 ,这 些 系 统 API 会 失败 或 传 回 异 常 返回 值 。 如 果 
开发 人 员 没 有 编写 代码 来 验证 传 回 的 预期 返回 值 , 则 应 用 程序 会 由 于 无 法 处 理 异常 而 
失败 。 
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2) 如 何 发 现 这 类 问题 

(1) 手工 损坏 文件 。 从 应 用 程序 已 创建 的 某 个 完整 文件 开始 对 其 进行 编辑 ,改变 文件 
格式 和 内 容 。 

(2) 使 用 测试 工具 。 模 拟 CRC( 循 环 元 余 校 验 ) 错 误 , 或 强制 文件 API 返回 无 效 的 返 
回 码 。 

3) 测试 方法 小 结 

(1) 应 用 场合 : 需要 对 文件 格式 和 内 容 进行 校 验 的 应 用 程序 。 

(2) 测试 方法 : 手工 损坏 文件 或 利用 测试 工具 模拟 CRC 错误 。 

(3) 测试 知识 储备 : 全 面 掌握 被 测 软件 的 需求 ,了 解 文件 读 写 需要 的 权限 。 


软件 评测 师 考试 大 纲 


一 、 考 试 说 明 


1. 考试 要 求 

(1) 熟悉 计算 机 基础 知识 ; 

(2) 熟悉 操作 系统 数据库 、 中 间 件 程序 设计 语言 基础 知识 ; 

(3) 熟悉 计算 机 网 络 基础 知识 ; 

(4) 熟悉 软件 工程 知识 ,理解 软件 开发 方法 及 过 程 ; 

(5) 熟悉 软件 质量 及 软件 质量 管理 基础 知识 ; 

(6) 熟悉 软件 测试 标准 ; 

(7) 掌握 软件 测试 技术 及 方法 ; 

(8) 掌握 软件 测试 项 目 管理 知识 ; 

(9) 掌握 C 语言 以 及 C++ 或 Java 语言 程序 设计 技术 ; 

(10) 了 解 信息 化 及 信息 安全 基础 知识 ; 

(OD 熟悉 知识 产权 相关 法 律 ,法规 ; 

(12) 正确 阅读 并 理解 相关 领域 的 英文 资料 。 

2. 通过 本 考试 的 合格 人 员 能 在 掌握 软件 工程 与 软件 测试 知识 的 基础 上 ,运用 软件 测试 
管理 办 法 、 软 件 测试 策略 、 软 件 测试 技术 ,独立 承担 软件 测试 项 目 ; 具有 工程 师 的 实际 工作 
能 力 和 业务 水 平 。 

3. 本 考试 设置 的 科目 包括 : 

CD 软件 工程 与 软件 测试 基础 知识 ,考试 时 间 为 150 分 钟 ,笔试 ,选择 题 ; 

(2) 软件 测试 应 用 技术 ,考试 时 间 为 150 分 钟 ,笔试 ,问答 题 。 


二 、 考 试 范围 


考试 科目 1: 软件 工程 与 软件 测试 基础 知识 
1. 计算 机 系统 基础 知识 
1.1 计算 机 系统 构成 及 硬件 基础 知识 
。 计算 机 系统 的 构成 
。 处 理 机 
* 基本 输入 输出 设备 
° 存储 系统 
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1.2 操作 系统 基础 知识 
* 操作 系统 的 中 断 控 制 、 进 程 管理 、 线 程 管理 
。 处 理 机 管理 ,存储 管理 .设备 管理 .文件 管理 .作业 管理 
* 网 络 操作 系统 和 嵌入 式 操 作 系 统 基础 知识 
。 操作 系统 的 配置 
1.3 数据库 基础 知识 
。 数据 库 基 本 原理 
。 数据 库 管理 系统 的 功能 和 特征 
。 数据 库 语言 与 编程 
1.4 中间 件 基础 知识 
1.5 计算 机 网 络 基础 知识 
* 网 络 分 类 、 体 系 结构 与 网 络 协议 
。 常用 网 络 设备 
* Internet 基础 知识 及 其 应 用 
。 网 络 管理 
1.6 程序 设计 语言 知识 
。 汇编 ,编译 ,解释 系统 的 基础 知识 
。 程序 设计 语言 的 基本 成 分 (数据 运算、 控制 和 传输 、 过 程 (函数 ) 调 用 ) 
。 面向 对 象 程序 设计 
。C 语言 以 及 C++ GX Java) 语 言 程序 设计 基础 知识 
2. 标准 化 基础 知识 
* 标准 化 的 概念 (标准 化 的 意义 ,标准 化 的 发 展 、 标 准 化 机 构 ) 
* 标准 的 层次 (国际 标准 、 国 家 标准 \ 行 业 标准 \ 企 业 标 准 ) 
* 标准 的 类 别 及 生命 周期 
3. 信息 安全 知识 
* 信息 安全 基本 概念 
。 计算 机 病毒 及 防范 
。 网 络 入 侵 手 段 及 防范 
。 加 密 与 解密 机 制 
4. 信息 化 基础 知识 
。 信息 化 相关 概念 
。 与 知识 产权 相关 的 法 律 .法规 
* 信息 网 络 系统 、 信 息 应 用 系统 、 信 息 资 源 系 统 基础 知识 
5. 软件 工程 知识 
5.1 软件 工程 基础 
。 软件 工程 概念 
。 需求 分 析 
。 软件 系统 设计 
。 软件 组 件 设计 
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。 软件 编码 
。 软件 测试 
。 软件 维护 
5.2 软件 开发 方法 及 过 程 
。 结构 化 开发 方法 
。 面向 对 象 开 发 方法 
。 瀑布 模型 
。 快速 原型 模型 
。 螺旋 模型 
5.3 软件 质量 管理 
。 软件 质量 及 软件 质量 管理 概念 
* 软件 质量 管理 体系 
* 软件 质量 管理 的 目标 内容 ,方法 和 技术 
5.4 软件 过 程 管理 
。 软件 过 程 管理 概念 
。 软件 过 程 改 进 
。 软件 能 力 成 熟 度 模型 
5.5 软件 配置 管理 
。 软件 配置 管理 的 意义 
* 软件 配置 管理 的 过 程 方 法 和 技术 
5.6 软件 开发 风险 基础 知识 
* 风险 管理 
。 风险 防范 及 应 对 
5.7 软件 工程 有 关 的 标准 
。 软件 工程 术语 
。 计算 机 软件 开发 规范 
。 计算 机 软件 产品 开发 文件 编制 指南 
。 计算 机 软件 需求 规范 说 明 编 制 指南 
。 计算 机 软件 测试 文件 编制 规范 
。 计算 机 软件 配置 管理 计划 规范 
。 计算 机 软件 质量 保证 计划 规范 
。 数据 流 图 ,程序 流 程 图 .系统 流程 图 ,程序 网 络 图 和 系统 资源 图 的 文件 编制 
符号 及 约定 
. 软件 评测 师 职 业 素质 要 求 
。 软件 评测 师 职 业 特 点 与 岗位 职责 
* 软件 评测 师 行为 准则 与 职业 道德 要 求 
。 软件 评测 师 的 能 力 要 求 
. 软件 评测 知识 
7.1 软件 测试 基本 概念 
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。 软件 质量 与 软件 测试 
。 软件 测试 定义 
。 软件 测试 目的 
。 软件 测试 原则 
。 软件 测试 对 象 
7.2 软件 测试 过 程 模型 
° V 模型 
。 W 模型 
。 H 模型 
。 测试 模型 的 使 用 
7.3 软件 测试 类 型 
。 单元 测试 .集成 测试 .系统 测试 
。 确认 测试 验收 测试 
。 开发 方 测试 .用 户 测试 ,第 三 方 测试 
* 动态 测试 .静态 测试 
* 白 盒 测试 . 黑 盒 测试 . 灰 盒 测 试 
7.4 软件 问题 分 类 
。 软件 错误 
。 软件 缺陷 
* 软件 故障 
。 软件 失效 
7.5 测试 标准 
7.5.1GB/T 16260. 1 一 2003 软件 工程 产品 质量 第 1 部 分 : 质量 模型 
7.5.2GB/T 18905. 1 一 2002 软件 工程 产品 评价 第 1 部 分 : 概述 
7.5. 3GB/T 18905. 5 一 2002 软件 工程 产品 评价 第 5 部 分 : 评价 者 用 的 过 程 
8. 软件 评测 现状 与 发 展 
。 国内 外 现状 
。 软件 评测 发 展 趋势 
9. 专业 英语 
* 正确 阅读 并 理解 相关 领域 的 英文 资料 
考试 科目 2: 软件 测试 应 用 技术 
1. 软件 生命 周期 测试 策略 
1.1 设计 阶段 的 评审 
。 需求 评审 
。 设计 评审 
。 测试 计划 与 设计 
1.2 开发 与 运行 阶段 的 测试 
。 单元 测试 
。 集成 测试 
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* 系统 (确认 ) 测 试 
° 验收 测试 


2. 测试 用 例 设计 方法 


2.1 白 盒 测 试 设计 
* 白 盒 测 试 基本 技术 
* 白 盒 测 试 方法 
2.2 黑 盒 测试 用 例 设 计 
。 测试 用 例 设计 方法 
。 测试 用 例 的 编写 
2.3 面向 对 象 测试 用 例 设 计 
2.4 测试 方法 选择 的 策略 
。 黑 盒 测 试 方法 选择 策略 
* 白 盒 测 试 方法 选择 策略 
° 面向 对 象 软件 的 测试 策略 
.软件 测试 技术 与 应 用 
3.1 软件 自动 化 测试 
。 软件 自动 化 测试 基本 概念 
。 选择 自动 化 测试 工具 
* 功能 自动 化 测试 
* 负载 压力 自动 化 测试 
3.2 面向 对 象 软件 的 测试 
° 面向 对 象 测试 模型 
。 面向 对 象 分 析 的 测试 
° 面向 对 象 设计 的 测试 
。 面向 对 象 编程 的 测试 
。 面向 对 象 的 单元 测试 
* 面向 对 象 的 集成 测试 
。 面向 对 象 的 系统 测试 
3.3 负载 压力 测试 
。 负载 压力 测试 基本 概念 
。 负载 压力 测试 解决 方案 
。 负载 压力 测试 指标 分 析 
。 负载 压力 测试 实施 
3.4 Web 应 用 测试 
* Web 应 用 的 测试 策略 
* Web 应 用 设计 测试 
。 Web 应 用 开发 测试 
* Web 应 用 运行 测试 


332 


N 


实用 软件 测试 


3.5 网 络 测试 
。 网 络 系统 全 生命 周期 测试 策略 
。 网 络 仿真 技术 
。 网 络 性 能 测试 
。 网 络 应 用 测试 
3.6 安全 测试 
。 测试 内 容 
。 测试 策略 
。 测试 方法 
3.7 兼容 性 测试 
。 硬件 兼容 性 测试 
* 软件 兼容 性 测试 
。 数据 兼容 性 测试 
。 新 旧 系统 数据 迁移 测试 
* 平台 软件 测试 
3.8 易 用 性 测试 
* 功能 易 用 性 测试 
。 用 户 界 面 测试 
3.9 文档 测试 
。 文档 测试 的 范围 
* 用 户 文档 的 内 容 
。 用 户 文档 测试 的 要 点 
* 用 户 手 册 的 测试 
。 在 线 帮 助 的 测试 


4. 测试 项 目 管理 


。 测试 过 程 的 特性 与 要 求 
。 软件 测试 与 配置 管理 
。 测试 的 组 织 与 人 员 

。 测试 文档 

° 软件 测试 风险 分 析 

° 软件 测试 的 成 本 管理 


三 、 题 型 举例 


(一 ) 选择 题 
1. 下 面 的 哪 一 项 测试 步骤 中 需要 进行 局 部 数据 结构 测试 ? C 


A. 单元 测试 B. 集成 测试 C. 确认 测试 


2. 软件 的 6 大 质量 特性 包括 ( D. 


A. 功能 性 、 可 靠 性 、 可 用 性 、 效 率 、 可 维护 、 可 移植 
B. 功能 性 、 可 靠 性 、 可 用 性 、 效 率 、 稳 定性 、 可 移植 


) 


D. 系统 测试 
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C. 功能 性 .可靠 性 .可 扩展 性 效率 、 稳 定性、 可 移植 
D. 功能 性 .可靠 性 兼容 性 效率 、 稳 定性 .可 移植 
(二 ) 问答 题 
1. 白 盒 测试 方法 中 的 代码 检查 法 需要 重点 考虑 代码 的 执行 效率 ,阅读 以 下 两 个 循环 ， 
回答 问题 1 和 问题 2。 
循环 1: 


for (i=0;i<n;i+t+) 
( 

if(condition) 
DoSonething() ; 

else 
DoOtherthing(); 

) 


循环 2: 


if(condition) 

{ 

for (i=0;i<n;i++) 
DoSonething() 

) 


else 


{ 

for (i=0;i<n;i++) 

DoOtherthing(); 

) 

问题 1: 循环 1 的 优点 和 缺点 。 

问题 2: 循环 2 的 优点 和 缺点 。 

2. 请 简 述 软件 系统 负载 压力 测试 的 主要 目的 。 


软件 评测 师 考试 模拟 试题 | 


6.1 软件 工程 与 软件 测试 基础 知识 


第 1 题 至 第 35 题 为 单 选 题 , 只 有 一 个 正确 答案 ,每 题 1 分 ; 
第 36 题 至 第 50 题 为 多 选 题 , 有 2 或 3 个 正确 选项 ,至 少 有 一 个 错误 选项 。 多 选 , 错 选 
均 不 得 分 。 少 选 , 漏 选 按 每 个 正确 项 得 分 0.5 分 。 


一 、 单 选 题 (35 小 题 ,每 题 1 分 , 共 35 分 ) 


Y. )is measurable. verifiable work product such as specification, feasibility study 
report, detail document.or working prototype. 
A. Milestone B. Deliverable C. Ete D. BAC 
2, € )are individuals and organizations that are actively involved in the project.or 
whose interests may be affected as a result of project execution or project completion; they 


may also exert influence over the project and its results. 


A. Controls B. Baselines 
C. Project stakeholders D. Project managers 
3. € ) is the process of obtaining the stakeholdrs' formal acceptance of the 


completed project scope. verifying the scope includes reviewing deliverables and work 


results to ensure that all were completed satisfactorily. 


A. Project acceptance B. Scope verification 
C. Scope definition D. WBS Creation 
4. In approximating costs. the estimator considers the possible causes of variation of 
the cost estimates. including ( )。 
A. budget B. plan C. risk D. contract 
5. ( )is a category assigned to products or services having the same functional use 


but different technical characteristics. It is not same as quality. 
A. Problem B. Grade C. Risk D. Defect 
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6. 下 列 关于 服务 外 包 的 说 法 ,正确 的 是 ( 站 
A. 服务 外 包 是 未 来 企业 的 发 展 趋势 ,其 产生 利润 将 超过 产品 贸易 
.软件 业 服务 外 包 依 托 互联 网 ,可 以 加 快 产品 的 更 新 升级 
. 服务 外 包 一 般 不 需要 中 间 的 发 包 商 ,利于 取得 利润 的 最 大 化 
.服务 外 包 让 包 出 企业 专注 核心 技术 ,降低 成 本 ,提高 效益 
) 是 一 种 面向 数据 流 的 开发 方法 ,其 基本 思想 是 软件 功能 的 分 解 和 抽象 。 
. 结构 化 开发 方法 B. Jackson 系统 开发 方法 
C. Booch 方法 D. UML 
8. “—titlestyle="italic"2>science< /title>” i—i XML 元 素 的 定义 ,其 中 元 素 标记 
的 属性 值 是 ( ) 。 
A. title B. style C. italic D. science 
9. 选择 测试 开发 工具 时 ,应 考虑 功能 、( ) 稳健 性 、 硬 件 要 求 和 性 能 .服务 和 
支持 。 
A. 易 用 性 B. 易 维护 性 
C. 可 移植 性 D. 可 扩充 性 
10. 在 面向 对 象 软件 开发 过 程 中 ,采用 设计 模式 ( o. 
A. 允许 在 非 面向 对 象 程序 设计 语言 中 使 用 面向 对 象 的 概念 
B. 以 复 用 成 功 的 设计 和 体系 结构 
C. 以 减少 设计 过 程 创建 的 类 的 个 数 
D. 以 保证 程序 的 运行 速度 达到 最 优 值 
ll. 某 项 目 组 准备 开发 一 个 大 规模 系统 ,上 且 具备 了 相关 领域 及 类 似 规模 系统 的 开发 经 
验 。 下 列 过 程 模型 中 ,( ) 最 适合 开发 此 项 目 。 
A. 原型 模型 B. 瀑布 模型 
C. V 模型 D. 螺旋 模型 
12. 按照 测试 实施 组 织 , 可 将 测试 划分 为 开发 方 测试 .用户 测试 .第 三 方 测试 。 下 面 关 
于 开发 方 测试 的 描述 正确 的 是 ( Js 
D 开发 方 测试 通常 也 叫 * 验 证 测试 ?或 “Alpha 测试 ” 
@ 开发 方 测试 又 称 “Beta 测试 
@ 开发 方 测试 可 以 从 软件 产品 编码 结束 之 后 开始 ,或 在 模块 ( 子 系统 ) 测 试 完成 后 开 
始 ,也 可 以 在 确认 测试 过 程 中 产品 达到 一 定 的 稳定 和 可 靠 程 度 之 后 再 开始 
@ 开发 方 测试 主要 是 把 软件 产品 有 计划 地 免费 分 发 到 目标 市 场 ,让 用 户 大 量 使 用 ,并 
评价 ,检查 软件 
A. @Q B. OO c. Qo D. 0909 
13. 软件 测试 信息 流 的 输入 包括 ( Jis 
D 软件 配置 (包括 软件 开发 文档 、 目 标 执行 程序 数据 结构 ) 
O 开发 工具 (开发 环境 、 数 据 库 、 中 间 件 等 ) 
© 测试 配置 (包括 测试 计划 ,测试 用 例 测试 驱动 程序 等 ) 
@ 测试 工具 (为 提高 软件 测试 效率 ,使 用 测试 工具 为 测试 工作 服务 
A. DQO B. 090 c. 0900 D. 990 
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14. 下 面 关 于 软件 测试 模型 的 描述 中 .不 正确 的 包括 ( 0. 
D V 模型 的 软件 测试 策略 既 包括 低层 测试 又 包括 高 层 测试 ,高 层 测试 是 为 了 源 代码 的 
正确 性 ,低层 测试 是 为 了 使 整个 系统 满足 用 户 的 需求 
@ V 模型 存在 一 定 的 局 限 性 , 它 仅 把 测试 过 程 作为 在 需求 分 析 、 概 要 设计 、 详 细 设 计 及 
编码 之 后 的 一 个 阶段 
© W 模型 可 以 说 是 V 模型 自然 而 然 的 发 展 。 它 强调 : 测试 伴随 着 整个 软件 开发 周期 ， 
而 且 测试 的 对 象 不 仅 是 程序 ,需求 、 功 能 和 设计 同样 要 测试 
@ fH 模型 中 软件 测试 是 一 个 独立 的 流程 ,贯穿 产品 整个 生命 周期 ,与 其 他 流程 并 发 地 
进行 
© H 模型 中 测试 准备 和 测试 实施 紧密 结合 ,有 利于 资源 调配 
A. OO B. @@ c. @@ D. @@ 
15. 系统 功能 测试 过 程 中 ,验证 需求 可 以 正确 实现 的 测试 用 例 称 为 ( De 
A. 业务 流程 测试 用 例 B. 功能 点 测试 用 例 
C. 通过 测试 用 例 D. 失败 测试 用 例 
16. 针对 电子 政务 类 应 用 系统 的 功能 测试 ,为 设计 有 效 的 测试 用 例 , 应 (  ”)。 
A. 使 业务 需求 的 覆盖 率 达 到 100% 
B. 利用 等 价 类 法 模拟 核心 业务 流程 的 正确 执行 
C. 对 一 个 业务 流程 的 测试 用 例 设计 一 条 验证 数据 
D. 经 常 使 用 边界 值 法 验证 界面 输入 值 
17. 白 盒 测试 也 称 结构 测试 或 逻辑 驱动 测试 ,典型 的 白 盒 测试 方法 包括 静态 测试 和 动 
态 测 试 。 其 中 ,静态 测试 除了 静态 结构 分 析 法 .静态 质量 度量 法 外 ,还 有 ( Jis 
A. 代码 检查 法 B. 逻辑 覆盖 法 
C. 基本 路 径 测试 法 D. 结构 覆盖 法 
18. 软件 可 移植 性 应 从 如 下 ( ) 方 面 进行 测试 。 
A. 适应 性 、 易 安装 性 .共存 性 、 易 蔡 换 性 
B. 适应 性 、 易 安装 性 .可 伸缩 性 、 易 替换 性 
C. 适应 性 、 易 安装 性 .兼容 性 、 易 蔡 换 性 
D. 适应 性 、 成 熟 性 兼容 性 、 易 替换 性 
19. 性 能 测试 过 程 中 需要 对 数据 库 服务 器 的 资源 使 用 进行 监控 ,( ) 不 属于 应 该 监 


控 的 指标 。 
A. CPU 占用 率 B. 可 用 内 存 数 
C. 点 击 率 D. 缓存 命中 率 
20. 功能 测试 执行 过 后 一 般 可 以 确认 系统 的 功能 缺陷 ,缺陷 的 类 型 包括 ( O. 
CD 功能 不 满足 隐 性 需求 @ 功能 实现 不 正确 


@ 功能 不 符合 相关 的 法 律 法 规 CD 功能 易 用 性 不 好 
A. © B. DOO c. @@@ D. @ 
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21. 计算 以 下 控制 流程 图 的 环 路 复杂 性 V (GO ,正确 答案 是 ( ^ 


O 


A. V(G)=2 B. V(G)=4 C. V(G)=9 D. V(G)=11 

22. 软件 评审 作为 质量 控制 的 一 个 重要 手段 ,已 经 被 业界 广泛 使 用 。 评 审 分 为 内 部 评 
审 和 外 部 评审 。 关 于 内 部 评审 的 叙述 ,正确 的 包括 ( js 

CD 对 软件 的 每 个 开发 阶段 都 要 进行 内 部 评审 
© 评审 人 员 由 软件 开发 组 、 质 量 管理 和 配置 管理 人 员 组 成 ,也 可 邀请 用 户 参 与 
© 评审 人 数 根据 实际 情况 确定 ,例如 根据 软件 的 规模 等 级 和 安全 性 等 级 等 指标 而 定 
@ 内 部 评审 由 用 户 单位 主持 ,由 信息 系统 建设 单位 组 织 , 应 成 立 评审 委员 会 

A. DOO B. DOG c. @@@ D. DOQQ 
23. 测试 记录 包括 ( ) 。 
CD 测试 计划 或 包含 测试 用 例 的 测试 规格 说 明 
© 测试 期 间 出 现 问题 的 评估 与 分 析 
@ 与 测试 用 例 相 关 的 所 有 结果 ,包括 在 测试 期 间 出 现 的 所 有 失败 
@ 测试 中 涉及 的 人 员 身 份 

A. DO B. DO c. @@ D. O0@@@ 
24. 对 于 监控 测试 周期 时 采用 的 度量 方法 ,下 列 叙述 中 不 当 的 是 ( m 

A. 基于 故障 和 基于 失效 的 度量 : 统计 特定 软件 版 本 中 的 故障 数 

B. 基于 测试 用 例 的 度量 : 统计 各 优先 级 的 测试 用 例 数量 

C. 基于 测试 对 象 的 度量 : 统计 代码 和 安装 平台 等 覆盖 情况 

D. 基于 成 本 的 度量 : 统计 已 经 花费 的 测试 成 本 ,下 一 测试 周期 的 成 本 与 预期 收益 
25. FIC — ) 是 测试 组 独立 的 缺点 。 

A. 测试 人 员 需 要 额外 的 培训 

B. 测试 人 员 需 要 花 时 间 了 解 所 要 测试 的 产品 的 需要 、 架 构 、 代 码 等 

C. 开发 人 员 可 能 会 失去 对 产品 质量 的 责任 心 
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D. 设立 独立 测试 组 会 花费 更 多 成 本 
26. 事件 报告 中 可 能 包括 的 错误 有 ( D. 
O 程序 错误 
© 规格 说 明 中 的 错误 
@ 用 户 手册 中 的 错误 


A. © B. OO c. 99 D. 099 
21. € ) 是 功能 测试 工具 。 
A. LoadRunner B. WinRunner C. QALoad D. WAS 


28. 对 需求 说 明 书 评测 的 内 容 包 括 ( — D. 
QD 系统 定义 的 目标 是 否 与 用 户 的 要 求 一 致 
@ 被 开发 项 目的 数据 流 与 数据 结构 是 否 足够 ,确定 
@ 与 所 有 其 他 系统 交互 的 重要 接口 是 否 都 已 经 描述 
© 主要 功能 是 否 已 包含 在 规定 的 软件 范围 之 内 ,是 否 都 已 充分 说 明 
C) 确认 软件 的 内 部 接口 与 外 部 接口 是 否 已 明确 定义 
A. DOG B. @@@ c. 09009 D. 0990 
29. 在 项 目 进行 过 程 中 ,一 个 测试 人 员 接 到 某 个 用 户 的 电话 ,用 户 表 明 在 系统 中 存在 一 


个 问题 并 要 求 更 改 , 这 个 测试 人 员 应 该 ( Js 


A. 马上 通知 程序 员 改 正 问题 
B. 记录 问题 并 提交 项 目 经 理 
C. AT BI 
D. 通过 测试 经 理 确认 ,确认 后 提交 项 目 经 理 
30. 项 目 配置 管理 的 主要 任务 中 ,不 包括 ( 3: > 
A. 版 本 管理 B. 发 行 管理 C. 检测 配置 D. 变更 控制 
31. 在 开发 的 软件 产品 完成 系统 测试 之 后 ,作为 最 终 产品 应 将 其 存 和 信 ( ”), 等 待 交付 


用 户 或 现场 安装 。 


A. 知识 库 B. 开发 库 C. 受 控 库 D. 产品 库 
32. 为 保证 测试 活动 的 可 控 性 ,必须 在 软件 测试 过 程 中 进行 软件 测试 配置 管理 ,一 般 来 


说 ,软件 测试 配置 管理 中 最 基本 的 活动 包括 ( 


A. 配置 项 标识 .配置 项 控制 .配置 状态 报告 .配置 审计 

配置 基线 确立 .配置 项 控制 .配置 报告 .配置 审计 

. 配置 项 标识 ,配置 项 变更 ,配置 审计 、` 配 置 跟踪 

. 配置 项 标识 配置 项 控制 .配置 状态 报告 .配置 跟踪 
) 可 以 作为 软件 测试 结束 的 标志 。 

. 使 用 了 特定 的 测试 用 例 

.错误 强度 曲线 下 降 到 预定 的 水 平 

. 查 出 了 预定 数目 的 错误 

. 按照 测试 计划 中 所 规定 的 时 间 进 行 了 测试 
) 是 导致 软件 缺陷 的 最 大 原因 。 

. 需求 规格 说 明 书 B. 设计 方案 


33. 


34. 
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C. 编写 代码 D. 测试 计划 
下 面 ~~@ 是 关于 软件 评测 师 工作 原则 的 描述 ,正确 的 判断 是 ( J 


CD 对 于 开发 人 员 提 交 的 程序 必须 进行 完全 的 测试 ,以 确保 程序 的 质量 

@ 必须 合理 安排 测试 任务 ,做 好 周密 的 测试 计划 ,平均 分 配 软件 各 个 模块 的 测试 时 间 

@ 在 测试 之 前 需要 与 开发 人 员 进 行 详细 的 交流 ,明确 开发 人 员 的 程序 设计 思路 ,并 以 
此 为 依据 开展 软件 测试 工作 ,最 大 程度 地 发 现 程 序 中 与 其 设计 思路 不 一 致 的 错误 

@ 要 对 自己 发 现 的 问题 负责 ,确保 每 一 个 问题 都 能 被 开发 人 员 理 解 和 修改 


A. OO B. OO c. 09 D. X 


二 、 多 选 题 (15 小 题 ,每 题 1 分 , 共 15 分 ) 


36. 


37. 


38. 


39. 


40. 


41. 


42. 


43. 


44. 


45. 


对 于 工作 规模 或 产品 界定 不 明确 的 外 包 项 目 ,一 般 不 应 该 采用 ( — ODER. 


A. 固定 总 价 合 同 B. 成 本 补偿 合同 

C. 工时 和 材料 合同 D. 采购 单 

软件 项 目的 可 行 性 研究 要 进行 一 次 ( ”) 需 求 分 析 。 

A. 详细 的 B. 全 面 的 C. 简化 的 D. 压缩 的 
下 列 属于 动态 测试 方法 的 是 ( y; 

A. 黑 盒 法 B. Wie Hus C. HAE D. 人工 检测 
功能 测试 执行 过 后 一 般 可 以 确认 系统 的 功能 缺陷 ,缺陷 的 类 型 包括 ( Y, 
A. 功能 不 满足 隐 性 需求 B. 功能 实现 不 正确 

C. 功能 易 用 性 不 好 D. 功能 不 符合 相关 的 法 律 法 规 
软件 测试 类 型 按 开 发 阶段 包括 ( ) 、 系 统 测试 和 验收 测试 。 

A. 单元 测试 B. 验证 测试 C. 集成 测试 D. 确认 测试 


下 列 活动 中 ,属于 测试 计划 活动 的 是 ( Jis 
A. 设计 测试 用 例 B. 确定 测试 环境 C. 定义 测试 级 别 D. 估算 测试 成 本 
测试 经 理 的 任务 通常 包括 ( D 


A. 编写 测试 计划 B. 选择 合适 的 测试 策略 和 方法 
C. 建立 和 维护 测试 环境 D. 选择 和 引入 合适 的 测试 工具 
配置 管理 系统 通常 由 ( ) 组 成 。 

A. 基线 库 B. 动态 库 C. 主 库 D. 产品 库 
缺陷 管理 中 关于 缺陷 的 严重 程度 的 描述 ,包含 ( Je 

A. 致命 B. 严重 c. — D. 可 忽略 


一 个 团队 从 开始 到 终止 ,是 一 个 不 断 成 长 和 变化 的 过 程 , 这 个 发 展 过 程 可 以 描述 为 


4 个 时 期 ,其 中 不 包括 ( m 


46. 


A. 形成 期 B. 震荡 期 C. 完善 期 D. 优化 期 
以 下 关于 设计 功能 测试 用 例 的 叙述 ,( ) 是 正确 的 。 

A. 尽量 用 80% 的 测试 用 例 覆 盖 20% 的 核心 业务 模块 

B. 功能 测试 用 例 中 不 包括 功能 的 依从 性 测试 用 例 

C. 功能 测试 用 例 中 包括 业务 流 ,也 包括 测试 数据 

D. 功能 测试 用 例 的 设计 应 注意 缺陷 群集 现象 
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` 


47. 关于 Bug 管理 流程 ,不 正确 的 做 法 是 ( Yo 


A. 开发 人 员 提 交 新 的 Bug 入 库 ,设置 状态 为 “New” 
B. 开发 人 员 确认 是 Bug ,设置 状态 为 "Fixed” 

C. 测试 人 员 确 认 问 题解 决 了 ,设置 状态 为 ”Closed” 
D. 测试 人 员 确 认 不 是 Bug, 设 置 状态 为 "Reopen” 


48. 测试 成 本 控制 的 目标 是 使 测试 开发 成 本 测试 实施 成 本 和 测试 维护 成 本 最 小 化 ,以 
下 理解 正确 的 是 ( ”)。 


49. 


50. 
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A. 测试 准备 成 本 不 属于 测试 实施 成 本 
B. 可 以 通过 加 强 软件 测试 的 配置 管理 来 降低 测试 维护 成 本 
C. 测试 设计 成 本 控制 的 目标 是 尽 可 能 地 减少 测试 总 执行 时 间 和 所 需 的 测试 专用 


设备 


D. 回归 测试 将 测试 案例 全 部 重新 执行 一 遍 , 可 以 将 测试 维护 成 本 降 至 最 低 

以 下 软件 质量 保证 的 目标 中 ,( ”) 是 正确 的 。 

A. 通过 监控 软件 开发 过 程 来 保证 产品 质量 

B. 保证 开发 出 来 的 软件 和 软件 开发 过 程 符合 相应 标准 与 规程 ,不 存在 软件 缺陷 
C. 保证 软件 产品 、 软 件 过 程 中 存在 的 问题 得 到 处 理 , 必 要 时 将 问题 反映 给 高 级 管 


理 者 


D. 确保 项 目 组 制定 的 计划 、 标 准 和 规程 适合 项 目 组 需要 ,同时 满足 评审 和 审计 


需要 


( ) 属 于 测试 人 员 编 写 的 文档 。 
A. 缺陷 报告 B. 测试 环境 配置 文档 
C. 缺陷 修复 报告 D. 测试 用 例 说 明文 档 


软件 测试 应 用 技术 


、 案 例 分 析 题 (每 小 题 25 分 , 共 50 分 ) 


试题 一 ”阅读 以 下 关于 软件 可 靠 性 需求 分 析 方面 的 叙述 ,回答 问题 1 .问题 2 和 问题 3。 

某 企 业 信息 部 门 的 李 工 程 师 正在 为 其 下 属 单位 开发 一 个 应 用 软件 ,在 编写 软件 需求 规 
格 说 明 书 时 ,涉及 如 何 定量 地 描述 软件 可 靠 性 的 问题 。 

李 工 认为 软件 可 靠 性 指 的 是 在 将 要 使 用 的 指定 环境 下 ,软件 能 以 用 户 可 接受 的 方式 正 
确 运行 任务 所 表现 出 来 的 能 力 。 从 定量 角度 看 ,似乎 应 当 是 该 软件 在 约定 的 环境 条 件 下 和 
在 给 定 的 时 间 区 间 内 ,按照 软件 规格 说 明 的 要 求 ,成 功 地 运行 程序 所 规定 功能 的 概率 。 但 
是 ,他 感到 要 具体 地 做 定量 描述 有 些 困 难 。 

为 此 , 李 工 查阅 到 了 本 部 门 某 个 软件 需求 规格 说 明 书 中 有 关 的 一 段 内 容 : 

CD 在 集成 与 系统 测试 期 间 , 由 非 开发 组 人 员 参 与 测试 ,每 10k 行 可 执行 代码 可 能 检测 
到 的 错误 (Bug) 不 能 大 于 6 个 ; 

(2) 在 提交 使 用 的 系统 中 ,每 10k 行 可 执行 代码 可 能 保留 的 错误 数 不 能 大 于 8 个 ; 

(3) 在 第 一 年 工作 期 间 , 系 统 在 99. 9% 的 工作 日 期 间 内 ,应 能 保持 100% 的 正常 工作 
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在 上 述说 明 后 ,还 有 一 条 注解 是 : 错误 (Bug) 可 采用 蒙特 卡 罗 (MonteCarlo) 随机 植 人 
技术 进行 测试 

[问题 1](12 分 ) 

李 工 程 师 首先 想到 了 曾经 学 到 过 采用 蒙特 卡 罗 随 机 统计 技术 确定 不 规则 形状 封闭 图 形 
面积 的 方法 , 即 采用 一 个 大 的 矩形 把 待 测 的 封闭 图 形 完全 包围 在 该 大 矩形 的 内 部 ,由 计算 机 
大 量 生成 在 此 矩形 内 均匀 分 布 的 “点 ”, 然 后 ,计数 清点 一 下 在 大 和 拢 形 内 总 的 “点 ”的 个 数 和 在 
封闭 图 形 内 的 “点 ”的 个 数 , 应 当 近似 地 有 : 

dyta pee neg p as rn m u 

如 果 把 这 个 思想 应 用 于 系统 测试 过 程 , 先 在 某 个 程序 中 随机 地 人 为 植 入 10 个 错误 
(Bug) ,然后 ,由 一 个 测试 组 进行 测试 ,结果 一 共 发 现 有 120 个 错误 ,其 中 有 6 个 是 人 为 植 人 

请 估算 一 下 这 时 该 程序 中 将 会 遗留 下 多 少 个 未 被 发 现 的 隐藏 错误 。 同 时 也 请 用 100 字 
以 内 的 文字 ,简要 地 以 提纲 方式 列举 出 采用 这 种 错误 随机 植 和 方式 来 估算 系统 中 遗留 错误 
所 固有 的 局 限 性 。 

[问题 2](6 分 ) 

在 进行 上 述 分 析 后 , 李 工程 师 感到 有 些 困 惑 , 于 是 与 本 企业 维护 系统 的 一 位 系统 管理 员 
进行 了 讨论 ,系统 管理 员 告 诉 他 可 以 借用 硬件 的 MTTF(MeanTime To Failure, 失 效 的 平 
均等 待 时间 ) 或 者 MTBF(MeanTime Between Failure, 失 效 的 平均 间隔 时 间 ) 作 为 软件 可 靠 
性 的 主要 指标 。 

这 时 , 李 工 程 师 查 到 了 本 企业 中 的 一 个 典型 例子 : 某 软件 在 提交 使 用 后 ,在 第 1 周 内 有 
5 次 软件 故障 ( 查 出 了 有 关 的 Bug ) ,在 第 2 一 4 周 内 共有 两 三 次 出 错 ( 也 排除 了 错误 根源 )， 
在 两 个 月 以 后 该 软件 一 直 能 正常 使 用 运行 (大 家 反映 不 错 ) ,一 直到 6 年 半 后 的 一 天 突然 停 
工 , 即 工作 不 正常 。 

请 用 100 字 以 内 文字 分 析 该 软件 最 后 一 次 工作 不 正常 的 可 能 原因 ,并 说 明 MTBF 是 在 
什么 意义 下 反映 了 软件 的 可 靠 性 。 

[问题 3](7 分 ) 

信息 部 门 的 吴 总 工程 师 向 李 工 程 师 建议 了 另 一 类 测试 方案 作为 “错误 随机 植 人 ?测试 方 
法 的 补充 。 即 由 甲 和 乙 两 组 测试 人 员 同 时 相互 独立 地 测试 同一 份 程序 ,测试 了 两 周 后 , 甲 组 
发 现 的 错误 总 数 为 330 个 , 乙 组 发 现 的 错误 总 数 为 320 个 ,其 中 两 个 组 发 现 的 相同 错误 数目 
为 300 个 。 请 大 体 上 估算 一 下 在 测试 前 此 程序 原 有 多 少 个 错误 ? 并 也 请 以 100 字 以 内 文 
字 , 简 要 说 明 使 用 这 类 估算 方法 的 必要 前 提 。 

试题 二 ”阅读 下 列 说 明 , 从 项 目测 试管 理 和 配置 管理 的 角度 ,回答 问题 1 至 问题 3。 将 
解答 填 人 答题 纸 的 对 应 栏 内 。 

【说 明 】 

老 高 承接 了 一 个 信息 系统 开发 项 目的 项 目 管理 工作 。 在 进行 了 需求 分 析 和 设计 后 ,项 
目 人 员 分 头 进行 开发 工作 ,期 间 客户 提出 的 一 些 变更 要 求 也 由 各 部 分 人 员 分 别 解决 。 各 部 
分 人 员 在 进行 自 测 的 时 候 均 报告 正常 ,因此 老 高 决定 直接 在 客户 现场 进行 集成 ,但 是 发 现 问 
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题 很 多 ,针对 系统 各 部 分 所 表现 出 来 的 问题 ,开发 人 员 又 分 别 进行 了 修改 ,但 是 问题 并 未 有 
明显 减少 ,而 且 项 目 工作 和 产品 版 本 越 来 越 混乱 。 
【问题 11(6 分 ) 
请 用 200 字 以 内 的 文字 ,分 析出 现 这 种 情况 的 原因 。 
【问题 21(12 分 ) 
请 用 300 字 以 内 的 文字 ,说 明 配 置 管理 的 主要 工作 并 做 简要 解释 。 
【问题 3107 分 ) 
请 用 300 字 以 内 的 文字 ,说 明 针对 目前 情况 可 采取 哪些 补救 措施 。 


软件 评测 师 考试 模拟 试 是 
参考 答案 | 


E.1 软件 工程 与 软件 测试 基础 知识 


一 、 单 选 题 (35 小 题 ,每 题 1 分 , 共 35 分 ) 


[5] 
«qu 
Ë 
* 
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m 
» 


= 
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. Deliverable 

. Project stakeholders 

Scope verification 

risk 

Grade 

.服务 外 包 让 包 出 企业 专注 核心 技术 ,降低 成 本 ,提高 效益 
.结构 化 开发 方法 

. italic 

易 用 性 

.以 复 用 成 功 的 设计 和 体系 结构 
瀑布 模型 

(0/6) 

Qoo 

00 

.功能 点 测试 用 例 

. 经 常 使 用 边界 值 法 验证 界面 输入 值 
- 代码 检查 法 

. 适应 性 、 易 安装 性 、 共 存 性 、 易 替换 性 
点 击 率 
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N 
# 
题 号 选择 项 答 案 
23 B. B. 090 
24 € C. 基于 测试 对 象 的 度量 : 统计 代码 和 安装 平台 等 覆盖 情况 
25 C. C. 开发 人 员 可 能 会 失去 对 产品 质量 的 责任 心 
26 D. D. D 
27 B. B. WinRunner 
28 D. D. DQO 
29 D. D. 通过 测试 经 理 确认 ,确认 后 提交 项 目 经 理 
30 C. C. 检测 配置 
31 D. D. 产品 库 
32 A. A. 配置 项 标识 .配置 项 控制 ,配置 状态 报告 .配置 审计 
33 B. B. 错误 强度 曲线 下 降 到 预定 的 水 平 
34 A. A. 需求 规格 说 明 书 
35 D. D. 无 


二 、 多 选 题 (15 小 题 ,每 题 1 分 , 共 15 分 ) 
多 选 , 错 选 不 得 分 , 少 选 , 漏 选 每 项 0. 5 分 。 


题 号 ”选择 项 答案 

36 ABD A. 固定 总 价 合 同 B. 成 本 补偿 合同 D. 采购 单 

97- CD C. 简化 的 D. 压缩 的 

38 ACD A. 黑 盒 法 C. Hfik D. 人 工 检 测 

39 ABC A. 功能 不 满足 隐 性 需求 B. 功能 实现 不 正确 C. 功能 易 用 性 不 好 

40 ACD A. 单元 测试 C. 集成 测试 D. 确认 测试 

4 BCD B. 确定 测试 环境 C. 定义 测试 级 别 D. 估算 测试 成 本 

42 ABD A. 编写 测试 计划 B. 选择 合适 的 测试 策略 和 方法 D. 选择 和 引入 合适 的 测试 工具 
43 BCD B. 动态 库 C. XH D. 产品 库 

4 ABC A. 致命 B. 严重 C. 一 般 

4 CD C. 完善 期 D. 优化 期 

46 ACD A. 尽量 用 80% 的 测试 用 例 覆 盖 20% 的 核心 业务 模块 。”C. 功能 测试 用 例 中 包括 业务 


流 , 也 包括 测试 数据 D. 功能 测试 用 例 的 设计 应 注意 缺陷 群集 现象 

47 ABD A. 开发 人 员 提 交 新 的 Bug 和 人 库 , 设 置 状 态 为 "New” B. 开发 人 员 确认 是 Bug, 设 置 状 
态 为 “Fixed” D. 测试 人 员 确 认 不 是 Bug, 设 置 状态 为 “Reopen” 

4 AB A. 测试 准备 成 本 不 属于 测试 实施 成 本 B. 可 以 通过 加 强 软件 测试 的 配置 管理 来 降低 
测试 维护 成 本 

4 ACD A. 通过 监控 软件 开发 过 程 来 保证 产品 质量 C 保证 软件 产品 ,软件 过 程 中 存在 的 问 
题 得 到 处 理 , 必 要 时 将 问题 反映 给 高 级 管理 者 D. 确保 项 目 组 制定 的 计划 标准 和 规 
程 适合 项 目 组 需要 ,同时 满足 评审 和 审计 需要 

50 ABD A. 缺陷 报告 B. 测试 环境 配置 文档 D. 测试 用 例 说 明文 档 


MRE ”软件 评测 师 考试 模拟 试题 参考 答案 


(E.2. 软件 测试 应 用 技术 
P 


三 、 案 例 分 析 题 (每 小 题 25 分 , 共 50 分 ) 


试题 一 ”答案 

[问题 1] 随机 植 入 的 局 限 性 (12 分 ) 

程序 总 错误 数 约 二 10X120/6 二 200 个 ,遗留 未 能 发 现 的 = 二 200 一 120 一 4 二 76 个 。 

CD 所 有 错误 不 会 平等 地 出 现 ; 

(2) 错误 有 连带 相关 性 (一 个 错误 的 存在 可 能 潜藏 有 另 一 个 错误 ); 

(3) 测试 检测 错误 时 ,错误 不 是 等 同 地 可 发 现 的 ; 

(4) 修复 错误 常会 引起 新 的 错误 。 

评分 标准 : 计算 每 个 答案 2 分 ,要 点 每 个 2 分 。 

[问题 2] MTBF 指标 的 意义 (6 分 ) 

突然 停止 正常 工作 的 原因 可 能 有 : 

(1) 用 户 突然 启用 一 个 以 前 从 未 用 过 的 新 功能 (用 户 的 可 预测 性 ) ; 

(2) 某 个 软件 维护 人 员 犯 了 个 错误 ,引入 了 一 个 新 错误 。 

MTBF 是 反映 “用 户 可 预测 性 ”与 “软件 中 存在 错误 数 ” 的 一 个 复杂 函数 。 

评分 标准 : 原因 每 个 2 分 ,答对 两 个 以 上 4 分 。MTBF 解释 2 分 。 

[问题 3] 两 组 相互 独立 预测 方案 (7 分 ) 

测试 前 程序 原 有 错误 可 以 认为 是 BNO=320X330/300=11X32=352 个 。 估 算 的 
前 提 : 

(1) 前 儿 周 发 现 的 错误 在 全 部 错误 中 有 代表 性 s 

(2) 两 组 发 现 的 不 同 错误 数 所 占 比 例 相 对 很 少 。 

评分 标准 : 计算 答案 3 分 ; 估算 前 提 每 个 2 分 ,答对 两 个 以 上 4 分 。 

试题 二 ”答案 

【问题 11(6 2) 

(1) 缺乏 项 目 整 体 管 理 ( 尤 其 是 整体 问题 分 析 ) 。 

(2) 缺乏 整体 变更 控制 规程 。 

(3) 缺乏 项 目 干系 人 之 间 的 沟通 。 

(4) 缺乏 配置 管理 。 

(5) 缺乏 整体 版 本 管理 。 

(6) 缺乏 单元 接口 测试 和 集成 测试 。 

评分 标准 : 每 个 要 点 1 分 。 

【问题 21(12 分 ) 

CD 制定 配置 管理 计划 。 确 定 方针 ,分 配 资源 ,明确 职责 ,计划 培训 ,确定 干系 人 ,制定 
配置 识别 准则 ,制定 基线 计划 ,制定 配置 库 备份 计划 ,制定 变更 控制 规程 ,制定 审批 计划 。 

(2) 配置 项 识别 。 识 别 配置 项 ,分 配 唯一 标识 ,确定 配置 项 特征 ,记录 配置 项 进入 时 间 ， 
确定 配置 项 拥有 者 职责 ,进行 配置 项 登记 管理 。 
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(3) 建立 配置 管理 系统 。 建 立 分 级 配置 管理 机 制 ,存储 和 检索 配置 项 ,共享 和 转换 配置 
项 ,进行 归档 记录、 保护 和 权限 设置 。 
(4) 基线 化 。 获 得 授权 ,建立 或 发 布 基线 ,形成 文件 ,使 基线 可 用 。 
(5) 建立 配置 库 。 建 立 动态 库 \ 受 控 库 和 静态 库 。 
(6) 变更 控制 。 包 括 变更 的 记录 分析 批准, 实施、 验证 ,沟通 和 存档 。 
C 配置 状态 统计 。 统 计 配 置 项 的 各 种 状态 。 
(8) 配置 审计 。 包 括 功能 配置 审计 和 物理 配置 审计 。 
评分 标准 : 每 个 要 点 1.5 分 。 
【问题 3](7 分 ) 
1. 针对 目前 系统 建立 或 调整 基线 ; 
. 梳理 变更 脉络 ,确定 统一 的 最 终 需 求 和 设计 ; 
. 梳理 配置 项 及 其 历史 版 本 ; 
. 对照 最 终 需求 和 设计 逐 项 分 析 现 有 配置 项 及 历史 版 本 的 符合 情况 ; 
. 根据 分 析 结 果 由 相关 干系 人 确定 整体 变更 计划 并 实施 ; 
. 加强 单元 接口 测试 与 系统 的 集成 测试 或 联 调 ; 
.加强 整体 版 本 管理 。 
评分 标准 : 每 个 要 点 1 分 。 
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